Darmowe narzędzie · liczy w przeglądarce
Generator robots.txt dla robotów AI.
Zdecyduj, które roboty AI wpuszczasz: te, od których zależą odpowiedzi z linkiem w ChatGPT, Claude i Perplexity, i te, które zbierają dane do trenowania modeli. Generator złoży gotowy plik robots.txt. Nic nie wysyłamy, wszystko dzieje się w Twojej przeglądarce.
Który robot do czego służy?
| Robot | Do czego | Grupa |
|---|---|---|
OAI-SearchBot | wyszukiwanie w ChatGPT | wyszukiwanie |
ChatGPT-User | ChatGPT otwiera stronę na prośbę użytkownika | wyszukiwanie |
Claude-SearchBot | wyszukiwanie w Claude | wyszukiwanie |
Claude-User | Claude otwiera stronę na prośbę użytkownika | wyszukiwanie |
PerplexityBot | indeks wyszukiwarki Perplexity | wyszukiwanie |
Perplexity-User | Perplexity otwiera stronę na prośbę użytkownika | wyszukiwanie |
GPTBot | trenowanie modeli OpenAI | trenowanie |
ClaudeBot | trenowanie modeli Anthropic | trenowanie |
Google-Extended | Gemini (trenowanie i odpowiedzi w aplikacjach Gemini); nie wpływa na wyniki Google ani AI Overviews | trenowanie |
Applebot-Extended | trenowanie modeli Apple | trenowanie |
CCBot | Common Crawl, otwarty zbiór danych używany do trenowania wielu modeli | trenowanie |
Meta-ExternalAgent | trenowanie modeli Meta | trenowanie |
Bytespider | ByteDance (TikTok) | trenowanie |
Nazwy robotów według dokumentacji OpenAI, Anthropic, Perplexity, Google, Apple, Common Crawl, Meta i ByteDance (stan na październik 2026). Firmy dodają nowe roboty, więc warto zajrzeć tu raz na kilka miesięcy.
Wersja „wyszukiwanie tak, trenowanie nie”
# robots.txt wygenerowany na aiagentbuilder.pl/narzedzia/generator-robots-txt/ # Wszystkie roboty (wyszukiwarki i inne) User-agent: * Disallow: /admin/ Allow: / # Roboty AI, które wpuszczasz (dostają też ścieżki zablokowane dla wszystkich) User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: Claude-SearchBot User-agent: Claude-User User-agent: PerplexityBot User-agent: Perplexity-User Disallow: /admin/ Allow: / # Roboty AI, które blokujesz User-agent: GPTBot User-agent: ClaudeBot User-agent: Google-Extended User-agent: Applebot-Extended User-agent: CCBot User-agent: Meta-ExternalAgent User-agent: Bytespider Disallow: /
Po wgraniu pliku
- Otwórz twojadomena.pl/robots.txt i sprawdź, czy widzisz nową wersję (czasem trzeba wyczyścić cache na hostingu albo w Cloudflare).
- W Google Search Console zajrzyj do raportu robots.txt (Ustawienia): pokaże błędy składni.
- Sprawdź stronę w teście widoczności w AI: zobaczysz, czy roboty AI są wpuszczone także na zaporze, bo robots.txt nie wyłącza blokad np. w Cloudflare.
- Dodaj plik llms.txt ze spisem najważniejszych podstron.
Najczęstsze pytania
Czy blokować roboty AI?
Jeśli chcesz, żeby asystenci AI polecali Twoją firmę, nie blokuj robotów wyszukiwania (OAI-SearchBot, Claude-SearchBot, PerplexityBot): od nich zależy, czy strona może pojawić się w odpowiedzi z linkiem. Blokada robotów trenujących (GPTBot, ClaudeBot, Google-Extended) to osobna decyzja: chroni treść przed trenowaniem modeli, ale modele mogą wtedy mniej wiedzieć o Twojej firmie.
Czy blokada GPTBota usuwa mnie z ChatGPT?
Nie. GPTBot zbiera dane do trenowania. Wyszukiwanie w ChatGPT korzysta z OAI-SearchBot. Możesz zablokować GPTBota i zostawić OAI-SearchBot, a strona dalej może pojawiać się w odpowiedziach ChatGPT.
Czy Google-Extended wpływa na pozycje w Google?
Nie. Google podaje, że Google-Extended nie wpływa na pozycje ani obecność w wyszukiwarce. AI Overviews w wyszukiwarce zależą od zwykłego Googlebota, więc blokada Google-Extended nie usuwa Cię z nich.
Dlaczego zablokowane ścieżki powtarzają się przy robotach AI?
Robot, który ma własną grupę User-agent, ignoruje grupę „*”. Jeśli zablokujesz /admin/ tylko w „*”, robot z własną grupą i tak by tam zajrzał. Dlatego generator kopiuje zablokowane ścieżki do grupy robotów AI, które wpuszczasz.
Czy wszystkie roboty słuchają robots.txt?
Duże firmy deklarują, że ich roboty go przestrzegają, ale robots.txt to prośba, nie zamek. Część dostawców zaznacza, że pobrania na prośbę użytkownika (ChatGPT-User, Perplexity-User) mogą go nie respektować. Twardą blokadę daje dopiero zapora (firewall).
Kontakt
Który proces zabiera najwięcej czasu?
Wystarczą 2–3 zdania: czym zajmuje się firma i który proces chcesz oddać jako pierwszy. Odpowiemy, czy agent ma tu sens i od czego warto zacząć.