Kategoria

Technika i boty AI

Boty AI, robots.txt, indeksacja i wszystko, co decyduje, czy AI w ogóle widzi Twoją stronę.

Technika

Boty AI w robots.txt: które wpuścić i czy blokować boty treningowe (2026)

Lista botów AI (OpenAI, Anthropic, Perplexity, Google, Apple, Meta i inne) z podziałem na te, które pobierają treść do odpowiedzi, i te, które zbierają dane do trenowania. Co z Grokiem, pułapka Google-Extended i gotowy robots.txt.

Piotr Wysocki6 min czytania