Lista robotów AI
54 boty od 27 firm przeglądają sieć, żeby trenować modele AI, zasilać wyszukiwanie i pobierać treści dla użytkowników. Sprawdź, kto odwiedza Twoją stronę i co robi z Twoimi treściami.
Chcesz zdecydować, które boty mają dostęp do Twojej strony?
Użyj reguł robots.txt, wygeneruj je albo uruchom analizę AlfaUMi, żeby zobaczyć, które boty wpuszcza Twój robots.txt.
| Nazwa bota | Firma | Wpływ | Użytkownicy miesięcznie | Opis | Źródło |
|---|---|---|---|---|---|
GPTBot | OpenAI | 8/ 10Wysoki | 900 mln+ | Zbiera treści, które mogą posłużyć do trenowania modeli bazowych OpenAI. Zablokowanie go wyłącza treści z trenowania, ale NIE usuwa strony z wyszukiwania ChatGPT: za to odpowiada OAI-SearchBot. | dokumentacja operatora dla GPTBot ↗ |
ChatGPT-User | OpenAI | 10/ 10Krytyczny | 900 mln+ | Pobiera stronę, gdy użytkownik ChatGPT lub Custom GPT o coś pyta. Działa na żądanie użytkownika, więc według OpenAI reguły robots.txt mogą go nie obejmować. | dokumentacja operatora dla ChatGPT-User ↗ |
OAI-SearchBot | OpenAI | 10/ 10Krytyczny | 900 mln+ | Pokazuje strony w funkcjach wyszukiwania ChatGPT. OpenAI: strony wypisane z OAI-SearchBot nie będą pokazywane w odpowiedziach wyszukiwania ChatGPT. | dokumentacja operatora dla OAI-SearchBot ↗ |
OAI-AdsBot | OpenAI | 4/ 10Niski | Reklamodawcy | Sprawdza bezpieczeństwo stron zgłoszonych jako reklamy w ChatGPT. Ma znaczenie tylko, jeśli się tam reklamujesz. | dokumentacja operatora dla OAI-AdsBot ↗ |
Google-Extended | 10/ 10Krytyczny | 750 mln+ | Token robots.txt, a nie crawler: steruje trenowaniem i ugruntowaniem Gemini w aplikacjach Gemini i Vertex AI. Google podaje, że nie wpływa na obecność w wyszukiwarce Google. Wyjście z AI Overviews to osobne ustawienie w Search Console. | dokumentacja operatora dla Google-Extended ↗ | |
GoogleOther | 8/ 10Wysoki | 750 mln+ | Ogólny crawler Google dla produktów AI (NotebookLM, Vertex AI). Używany w różnych usługach AI Google. | dokumentacja operatora dla GoogleOther ↗ | |
Gemini-Deep-Research | 8/ 10Wysoki | 750 mln+ | Crawler Gemini Deep Research do pogłębionej analizy stron. Pobiera treści dla złożonych zapytań. | niezależna lista wymienia Gemini-Deep-Research ↗ | |
Google-GeminiNotebook | 7/ 10Wysoki | ok. 50 mln | Bot pobierający dla Gemini Notebook, narzędzia Google do analizy dokumentów. Do 16.07.2026 nazywał się Google-NotebookLM; stary token na razie nadal działa. | dokumentacja operatora dla Google-GeminiNotebook ↗ | |
Google-NotebookLM | 5/ 10Średni | ok. 50 mln | Dawna nazwa Google-GeminiNotebook, nadal respektowana. Trzymaj reguły dla obu nazw, dopóki Google jej nie wycofa. | dokumentacja operatora dla Google-NotebookLM ↗ | |
Google-Agent | 7/ 10Wysoki | Nowy (2026) | Używany przez agentów działających na infrastrukturze Google do poruszania się po sieci i wykonywania poleceń użytkownika. Udokumentowany 20.03.2026 z własnymi zakresami IP; jako bot działający na żądanie użytkownika na ogół ignoruje robots.txt. | dokumentacja operatora dla Google-Agent ↗ | |
GoogleAgent-Mariner | 6/ 10Średni | Nowy (2025) | Eksperymentalny agent Google do samodzielnego przeglądania sieci. Project Mariner. | niezależna lista wymienia GoogleAgent-Mariner ↗ | |
Google-CloudVertexBot | 6/ 10Średni | Firmy | Crawler Google Cloud Vertex AI dla klientów biznesowych. B2B, mniejszy zasięg wśród konsumentów. | dokumentacja operatora dla Google-CloudVertexBot ↗ | |
ClaudeBot | Anthropic | 7/ 10Wysoki | 30 mln+ | Zbiera treści z sieci, które mogą posłużyć do trenowania modeli Anthropic. Zablokowanie go wyłącza przyszłe materiały z trenowania; za wyszukiwanie i pobrania na żądanie użytkownika odpowiadają Claude-SearchBot i Claude-User. | dokumentacja operatora dla ClaudeBot ↗ |
Claude-User | Anthropic | 9/ 10Krytyczny | 30 mln+ | Pobiera stronę, gdy pyta o nią użytkownik Claude. Anthropic podaje, że zablokowanie go może zmniejszyć Twoją widoczność w wyszukiwaniu inicjowanym przez użytkowników. | dokumentacja operatora dla Claude-User ↗ |
Claude-Web | Anthropic | 3/ 10Niski | Wycofany | Wycofany token: aktualna dokumentacja crawlerów Anthropic już go nie wymienia. Pisz reguły dla ClaudeBot, Claude-SearchBot i Claude-User. | niezależna lista wymienia Claude-Web ↗ |
Claude-SearchBot | Anthropic | 9/ 10Krytyczny | 30 mln+ | Przegląda sieć, by poprawiać wyniki wyszukiwania Claude. Anthropic podaje, że zablokowanie go może zmniejszyć widoczność i trafność Twojej strony w wynikach wyszukiwania użytkowników. | dokumentacja operatora dla Claude-SearchBot ↗ |
anthropic-ai | Anthropic | 3/ 10Niski | Wycofany | Wycofany token: aktualna dokumentacja crawlerów Anthropic już go nie wymienia. | niezależna lista wymienia anthropic-ai ↗ |
PerplexityBot | Perplexity | 9/ 10Krytyczny | 45 mln+ | Pokazuje strony i linkuje do nich w wynikach wyszukiwania Perplexity. Perplexity podaje, że nie służy do zbierania treści dla bazowych modeli AI. | dokumentacja operatora dla PerplexityBot ↗ |
Perplexity-User | Perplexity | 8/ 10Wysoki | 45 mln+ | Pobiera stronę, gdy użytkownik Perplexity o coś pyta. Perplexity podaje, że ten bot na ogół ignoruje robots.txt, bo żądanie zainicjował użytkownik. | dokumentacja operatora dla Perplexity-User ↗ |
Grokbot | xAI | 8/ 10Wysoki | 78 mln+ | Crawler xAI (Elon Musk) dla Groka. Zintegrowany z X (Twitter). Szybki wzrost dzięki X Premium. | niepotwierdzony |
xAI-Grok | xAI | 8/ 10Wysoki | 78 mln+ | Alternatywny identyfikator crawlera Groka. Indeksuje strony do bazy wiedzy Groka. | niepotwierdzony |
Meta-WebIndexer | Meta | 8/ 10Wysoki | 1 mld+ | Przegląda sieć, by poprawiać jakość wyników wyszukiwania Meta AI. To token Mety odpowiedzialny za wykrywalność: zablokuj go, a nie pojawisz się w odpowiedziach Meta AI. | niezależna lista wymienia Meta-WebIndexer ↗ |
Meta-ExternalAgent | Meta | 8/ 10Wysoki | 1 mld+ | Według strony Mety o crawlerach zbiera treści m.in. do trenowania bazowych modeli AI. To nie ten bot umieszcza Cię w odpowiedzi Meta AI. | niezależna lista wymienia Meta-ExternalAgent ↗ |
Meta-ExternalFetcher | Meta | 8/ 10Wysoki | 1 mld+ | Pobiera pojedyncze linki na prośbę użytkownika. Meta podaje, że może pomijać robots.txt, bo pobranie inicjuje użytkownik. | niezależna lista wymienia Meta-ExternalFetcher ↗ |
Meta-ExternalAds | Meta | 5/ 10Średni | 1 mld+ | Zbiera treści m.in. do ulepszania reklam i innych produktów biznesowych. Wymieniony na stronie Mety o crawlerach, ale nieobecny na liście społecznościowej, a tamtej strony nie da się stąd sprawdzić automatycznie. | niepotwierdzony |
meta-externalagent | Meta | 8/ 10Wysoki | 1 mld+ | Zapis małymi literami widoczny w logach (meta-externalagent/1.1). Ta sama kontrolka co Meta-ExternalAgent, a nie drugi bot. | niezależna lista wymienia meta-externalagent ↗ |
FacebookBot | Meta | 5/ 10Średni | 1 mld+ | NIE ma go na aktualnej stronie Mety o crawlerach, która opisuje FacebookExternalHit, Meta-ExternalAgent, Meta-ExternalFetcher, Meta-WebIndexer i Meta-ExternalAds. Zostaje, bo lista społecznościowa wciąż go zawiera, a stare reguły wciąż go wymieniają. | niezależna lista wymienia FacebookBot ↗ |
Applebot | Apple | 8/ 10Wysoki | 2 mld+ | Crawler Apple dla Siri, Spotlight i Apple News. Apple nie używa stron oznaczonych nosnippet jako kontekstu dla odpowiedzi AI, a Applebot nie respektuje crawl-delay. | dokumentacja operatora dla Applebot ↗ |
Applebot-Extended | Apple | 7/ 10Wysoki | 2 mld+ | Nie przegląda stron. Token robots.txt, który wyłącza treści z trenowania modeli bazowych Apple; strony, które go blokują, nadal mogą pojawiać się w wynikach wyszukiwania. | dokumentacja operatora dla Applebot-Extended ↗ |
bingbot | Microsoft | 9/ 10Krytyczny | 100 mln+ | Główny crawler Binga. Korzystają z niego też Copilot i inne produkty AI Microsoftu. | dokumentacja operatora dla bingbot ↗ |
BingPreview | Microsoft | 7/ 10Wysoki | 100 mln+ | Generuje podglądy linków w Bing, Teams i Outlooku. Miniatury podglądu. | niepotwierdzony |
Amazonbot | Amazon | 7/ 10Wysoki | 500 mln+ | Crawler Amazona dla Alexy i wyszukiwarki Amazon. Odpowiada na zapytania głosowe. | dokumentacja operatora dla Amazonbot ↗ |
AmazonBuyForMe | Amazon | 6/ 10Średni | Nowy (2026) | Nowy agent zakupowy Amazona. Samodzielnie przegląda strony, by dokonać zakupu. | niezależna lista wymienia AmazonBuyForMe ↗ |
Amzn-SearchBot | Amazon | 6/ 10Średni | 500 mln+ | Crawler Amazona do wyszukiwania produktów i informacji. | dokumentacja operatora dla Amzn-SearchBot ↗ |
DuckAssistBot | DuckDuckGo | 7/ 10Wysoki | 100 mln+ | Crawler asystenta AI DuckDuckGo. Stawia na prywatność, nie śledzi użytkowników. | dokumentacja operatora dla DuckAssistBot ↗ |
YouBot | You.com | 6/ 10Średni | 10 mln+ | Crawler You.com — wyszukiwarki AI. Konkurent Perplexity. | niezależna lista wymienia YouBot ↗ |
PhindBot | Phind | 6/ 10Średni | 5 mln+ | Crawler Phind — wyszukiwarki AI dla programistów. Specjalizuje się w kodzie. | niezależna lista wymienia PhindBot ↗ |
Andibot | Andi | 5/ 10Średni | 2 mln+ | Crawler Andi Search — konwersacyjnej wyszukiwarki AI. | niezależna lista wymienia Andibot ↗ |
Bravebot | Brave | 6/ 10Średni | 70 mln+ | Crawler Brave Search i Leo AI. Przeglądarka nastawiona na prywatność, z AI. | niezależna lista wymienia Bravebot ↗ |
iAskBot | iAsk.ai | 5/ 10Średni | 3 mln+ | Crawler iAsk.ai — darmowej wyszukiwarki AI. Popularny w edukacji. | niezależna lista wymienia iAskBot ↗ |
KomoSearch | Komo | 4/ 10Niski | 1 mln+ | Crawler Komo AI Search. Mniejszy gracz na rynku wyszukiwania AI. | niepotwierdzony |
DeepSeekBot | DeepSeek | 8/ 10Wysoki | 97 mln+ | Crawler chińskiego DeepSeek. Nr 4 na świecie, tani model, 35% użytkowników z Chin. | niezależna lista wymienia DeepSeekBot ↗ |
MistralAI-User | Mistral | 6/ 10Średni | 5 mln+ | Crawler Mistral AI (Francja). Europejski konkurent OpenAI, open source. | niezależna lista wymienia MistralAI-User ↗ |
cohere-ai | Cohere | 5/ 10Średni | Firmy | Crawler Cohere — kanadyjskiej firmy AI. Głównie B2B i duże firmy. | niezależna lista wymienia cohere-ai ↗ |
cohere-training-data-crawler | Cohere | 5/ 10Średni | Firmy | Crawler Cohere zbierający dane treningowe. | niezależna lista wymienia cohere-training-data-crawler ↗ |
Diffbot | Diffbot | 6/ 10Średni | Firmy | Crawler Diffbot — porządkuje dane z sieci. B2B, grafy wiedzy. | niezależna lista wymienia Diffbot ↗ |
CCBot | Common Crawl | 7/ 10Wysoki | Badania | Crawler Common Crawl — organizacji non-profit zbierającej dane do badań nad AI. Korzysta z nich wiele firm AI. | dokumentacja operatora dla CCBot ↗ |
DataForSeoBot | DataForSEO | 5/ 10Średni | B2B | Crawler DataForSEO — dane SEO dla marketerów i narzędzi. | dokumentacja operatora dla DataForSeoBot ↗ |
Bytespider | ByteDance | 8/ 10Wysoki | 1 mld+ | Crawler ByteDance (TikTok, Douyin). Indeksuje strony dla wyszukiwarki TikToka i AI. | niezależna lista wymienia Bytespider ↗ |
TikTokSpider | ByteDance | 7/ 10Wysoki | 1 mld+ | Alternatywny crawler TikToka. Pobiera treści do wyświetlania w aplikacji. | niezależna lista wymienia TikTokSpider ↗ |
PetalBot | Huawei | 6/ 10Średni | 500 mln+ | Crawler Huawei Petal Search. Popularny w Chinach i na urządzeniach Huawei. | niezależna lista wymienia PetalBot ↗ |
SemrushBot | Semrush | 5/ 10Średni | B2B | Crawler Semrush — narzędzia SEO. Analizuje strony dla marketerów. | dokumentacja operatora dla SemrushBot ↗ |
AhrefsBot | Ahrefs | 5/ 10Średni | B2B | Crawler Ahrefs — narzędzia SEO. Buduje indeks linków. | dokumentacja operatora dla AhrefsBot ↗ |
YandexBot | Yandex | 6/ 10Średni | 100 mln+ | Crawler Yandex — rosyjskiej wyszukiwarki. Popularny w Rosji i krajach WNP. | dokumentacja operatora dla YandexBot ↗ |
GPTBot8/ 10WysokiOpenAI900 mln+ użytkownikówZbiera treści, które mogą posłużyć do trenowania modeli bazowych OpenAI. Zablokowanie go wyłącza treści z trenowania, ale NIE usuwa strony z wyszukiwania ChatGPT: za to odpowiada OAI-SearchBot.
ChatGPT-User10/ 10KrytycznyOpenAI900 mln+ użytkownikówPobiera stronę, gdy użytkownik ChatGPT lub Custom GPT o coś pyta. Działa na żądanie użytkownika, więc według OpenAI reguły robots.txt mogą go nie obejmować.
OAI-SearchBot10/ 10KrytycznyOpenAI900 mln+ użytkownikówPokazuje strony w funkcjach wyszukiwania ChatGPT. OpenAI: strony wypisane z OAI-SearchBot nie będą pokazywane w odpowiedziach wyszukiwania ChatGPT.
OAI-AdsBot4/ 10NiskiOpenAIReklamodawcySprawdza bezpieczeństwo stron zgłoszonych jako reklamy w ChatGPT. Ma znaczenie tylko, jeśli się tam reklamujesz.
Google-Extended10/ 10KrytycznyGoogle750 mln+ użytkownikówToken robots.txt, a nie crawler: steruje trenowaniem i ugruntowaniem Gemini w aplikacjach Gemini i Vertex AI. Google podaje, że nie wpływa na obecność w wyszukiwarce Google. Wyjście z AI Overviews to osobne ustawienie w Search Console.
GoogleOther8/ 10WysokiGoogle750 mln+ użytkownikówOgólny crawler Google dla produktów AI (NotebookLM, Vertex AI). Używany w różnych usługach AI Google.
Gemini-Deep-Research8/ 10WysokiGoogle750 mln+ użytkownikówCrawler Gemini Deep Research do pogłębionej analizy stron. Pobiera treści dla złożonych zapytań.
Google-GeminiNotebook7/ 10WysokiGoogleok. 50 mln użytkownikówBot pobierający dla Gemini Notebook, narzędzia Google do analizy dokumentów. Do 16.07.2026 nazywał się Google-NotebookLM; stary token na razie nadal działa.
Google-NotebookLM5/ 10ŚredniGoogleok. 50 mln użytkownikówDawna nazwa Google-GeminiNotebook, nadal respektowana. Trzymaj reguły dla obu nazw, dopóki Google jej nie wycofa.
Google-Agent7/ 10WysokiGoogleNowy (2026)Używany przez agentów działających na infrastrukturze Google do poruszania się po sieci i wykonywania poleceń użytkownika. Udokumentowany 20.03.2026 z własnymi zakresami IP; jako bot działający na żądanie użytkownika na ogół ignoruje robots.txt.
GoogleAgent-Mariner6/ 10ŚredniGoogleNowy (2025)Eksperymentalny agent Google do samodzielnego przeglądania sieci. Project Mariner.
Google-CloudVertexBot6/ 10ŚredniGoogleFirmyCrawler Google Cloud Vertex AI dla klientów biznesowych. B2B, mniejszy zasięg wśród konsumentów.
ClaudeBot7/ 10WysokiAnthropic30 mln+ użytkownikówZbiera treści z sieci, które mogą posłużyć do trenowania modeli Anthropic. Zablokowanie go wyłącza przyszłe materiały z trenowania; za wyszukiwanie i pobrania na żądanie użytkownika odpowiadają Claude-SearchBot i Claude-User.
Claude-User9/ 10KrytycznyAnthropic30 mln+ użytkownikówPobiera stronę, gdy pyta o nią użytkownik Claude. Anthropic podaje, że zablokowanie go może zmniejszyć Twoją widoczność w wyszukiwaniu inicjowanym przez użytkowników.
Claude-Web3/ 10NiskiAnthropicWycofanyWycofany token: aktualna dokumentacja crawlerów Anthropic już go nie wymienia. Pisz reguły dla ClaudeBot, Claude-SearchBot i Claude-User.
Claude-SearchBot9/ 10KrytycznyAnthropic30 mln+ użytkownikówPrzegląda sieć, by poprawiać wyniki wyszukiwania Claude. Anthropic podaje, że zablokowanie go może zmniejszyć widoczność i trafność Twojej strony w wynikach wyszukiwania użytkowników.
anthropic-ai3/ 10NiskiAnthropicWycofanyWycofany token: aktualna dokumentacja crawlerów Anthropic już go nie wymienia.
PerplexityBot9/ 10KrytycznyPerplexity45 mln+ użytkownikówPokazuje strony i linkuje do nich w wynikach wyszukiwania Perplexity. Perplexity podaje, że nie służy do zbierania treści dla bazowych modeli AI.
Perplexity-User8/ 10WysokiPerplexity45 mln+ użytkownikówPobiera stronę, gdy użytkownik Perplexity o coś pyta. Perplexity podaje, że ten bot na ogół ignoruje robots.txt, bo żądanie zainicjował użytkownik.
Grokbot8/ 10WysokixAI78 mln+ użytkownikówCrawler xAI (Elon Musk) dla Groka. Zintegrowany z X (Twitter). Szybki wzrost dzięki X Premium.
niepotwierdzony
xAI-Grok8/ 10WysokixAI78 mln+ użytkownikówAlternatywny identyfikator crawlera Groka. Indeksuje strony do bazy wiedzy Groka.
niepotwierdzony
Meta-WebIndexer8/ 10WysokiMeta1 mld+ użytkownikówPrzegląda sieć, by poprawiać jakość wyników wyszukiwania Meta AI. To token Mety odpowiedzialny za wykrywalność: zablokuj go, a nie pojawisz się w odpowiedziach Meta AI.
Meta-ExternalAgent8/ 10WysokiMeta1 mld+ użytkownikówWedług strony Mety o crawlerach zbiera treści m.in. do trenowania bazowych modeli AI. To nie ten bot umieszcza Cię w odpowiedzi Meta AI.
Meta-ExternalFetcher8/ 10WysokiMeta1 mld+ użytkownikówPobiera pojedyncze linki na prośbę użytkownika. Meta podaje, że może pomijać robots.txt, bo pobranie inicjuje użytkownik.
Meta-ExternalAds5/ 10ŚredniMeta1 mld+ użytkownikówZbiera treści m.in. do ulepszania reklam i innych produktów biznesowych. Wymieniony na stronie Mety o crawlerach, ale nieobecny na liście społecznościowej, a tamtej strony nie da się stąd sprawdzić automatycznie.
niepotwierdzony
meta-externalagent8/ 10WysokiMeta1 mld+ użytkownikówZapis małymi literami widoczny w logach (meta-externalagent/1.1). Ta sama kontrolka co Meta-ExternalAgent, a nie drugi bot.
FacebookBot5/ 10ŚredniMeta1 mld+ użytkownikówNIE ma go na aktualnej stronie Mety o crawlerach, która opisuje FacebookExternalHit, Meta-ExternalAgent, Meta-ExternalFetcher, Meta-WebIndexer i Meta-ExternalAds. Zostaje, bo lista społecznościowa wciąż go zawiera, a stare reguły wciąż go wymieniają.
Applebot8/ 10WysokiApple2 mld+ użytkownikówCrawler Apple dla Siri, Spotlight i Apple News. Apple nie używa stron oznaczonych nosnippet jako kontekstu dla odpowiedzi AI, a Applebot nie respektuje crawl-delay.
Applebot-Extended7/ 10WysokiApple2 mld+ użytkownikówNie przegląda stron. Token robots.txt, który wyłącza treści z trenowania modeli bazowych Apple; strony, które go blokują, nadal mogą pojawiać się w wynikach wyszukiwania.
bingbot9/ 10KrytycznyMicrosoft100 mln+ użytkownikówGłówny crawler Binga. Korzystają z niego też Copilot i inne produkty AI Microsoftu.
BingPreview7/ 10WysokiMicrosoft100 mln+ użytkownikówGeneruje podglądy linków w Bing, Teams i Outlooku. Miniatury podglądu.
niepotwierdzony
Amazonbot7/ 10WysokiAmazon500 mln+ użytkownikówCrawler Amazona dla Alexy i wyszukiwarki Amazon. Odpowiada na zapytania głosowe.
AmazonBuyForMe6/ 10ŚredniAmazonNowy (2026)Nowy agent zakupowy Amazona. Samodzielnie przegląda strony, by dokonać zakupu.
Amzn-SearchBot6/ 10ŚredniAmazon500 mln+ użytkownikówCrawler Amazona do wyszukiwania produktów i informacji.
DuckAssistBot7/ 10WysokiDuckDuckGo100 mln+ użytkownikówCrawler asystenta AI DuckDuckGo. Stawia na prywatność, nie śledzi użytkowników.
YouBot6/ 10ŚredniYou.com10 mln+ użytkownikówCrawler You.com — wyszukiwarki AI. Konkurent Perplexity.
PhindBot6/ 10ŚredniPhind5 mln+ użytkownikówCrawler Phind — wyszukiwarki AI dla programistów. Specjalizuje się w kodzie.
Andibot5/ 10ŚredniAndi2 mln+ użytkownikówCrawler Andi Search — konwersacyjnej wyszukiwarki AI.
Bravebot6/ 10ŚredniBrave70 mln+ użytkownikówCrawler Brave Search i Leo AI. Przeglądarka nastawiona na prywatność, z AI.
iAskBot5/ 10ŚredniiAsk.ai3 mln+ użytkownikówCrawler iAsk.ai — darmowej wyszukiwarki AI. Popularny w edukacji.
KomoSearch4/ 10NiskiKomo1 mln+ użytkownikówCrawler Komo AI Search. Mniejszy gracz na rynku wyszukiwania AI.
niepotwierdzony
DeepSeekBot8/ 10WysokiDeepSeek97 mln+ użytkownikówCrawler chińskiego DeepSeek. Nr 4 na świecie, tani model, 35% użytkowników z Chin.
MistralAI-User6/ 10ŚredniMistral5 mln+ użytkownikówCrawler Mistral AI (Francja). Europejski konkurent OpenAI, open source.
cohere-ai5/ 10ŚredniCohereFirmyCrawler Cohere — kanadyjskiej firmy AI. Głównie B2B i duże firmy.
cohere-training-data-crawler5/ 10ŚredniCohereFirmyCrawler Cohere zbierający dane treningowe.
Diffbot6/ 10ŚredniDiffbotFirmyCrawler Diffbot — porządkuje dane z sieci. B2B, grafy wiedzy.
CCBot7/ 10WysokiCommon CrawlBadaniaCrawler Common Crawl — organizacji non-profit zbierającej dane do badań nad AI. Korzysta z nich wiele firm AI.
DataForSeoBot5/ 10ŚredniDataForSEOB2BCrawler DataForSEO — dane SEO dla marketerów i narzędzi.
Bytespider8/ 10WysokiByteDance1 mld+ użytkownikówCrawler ByteDance (TikTok, Douyin). Indeksuje strony dla wyszukiwarki TikToka i AI.
TikTokSpider7/ 10WysokiByteDance1 mld+ użytkownikówAlternatywny crawler TikToka. Pobiera treści do wyświetlania w aplikacji.
PetalBot6/ 10ŚredniHuawei500 mln+ użytkownikówCrawler Huawei Petal Search. Popularny w Chinach i na urządzeniach Huawei.
SemrushBot5/ 10ŚredniSemrushB2BCrawler Semrush — narzędzia SEO. Analizuje strony dla marketerów.
AhrefsBot5/ 10ŚredniAhrefsB2BCrawler Ahrefs — narzędzia SEO. Buduje indeks linków.
YandexBot6/ 10ŚredniYandex100 mln+ użytkownikówCrawler Yandex — rosyjskiej wyszukiwarki. Popularny w Rosji i krajach WNP.
Co naprawdę daje blokada
„Disallowing GPTBot indicates a site’s content should not be used in training generative AI foundation models.” — tak pisze OpenAI we własnej dokumentacji ↗Zablokowanie GPTBot oznacza, że treści strony nie powinny być używane do trenowania generatywnych modeli bazowych AI. (tłum. AlfaUMi)
„When a site restricts ClaudeBot access, it signals that the site’s future materials should be excluded from our AI model training datasets.” — tak pisze Anthropic we własnej dokumentacji ↗Gdy strona ogranicza dostęp ClaudeBot, sygnalizuje, że jej przyszłe materiały powinny zostać wyłączone z naszych zbiorów danych do trenowania modeli AI. (tłum. AlfaUMi)
„Sites that are opted out of OAI-SearchBot will not be shown in ChatGPT search answers.” — tak pisze OpenAI we własnej dokumentacji ↗Strony wypisane z OAI-SearchBot nie będą pokazywane w odpowiedziach wyszukiwania ChatGPT. (tłum. AlfaUMi)
„Google-Extended does not impact a site’s inclusion in Google Search nor is it used as a ranking signal in Google Search.” — tak pisze Google we własnej dokumentacji ↗Google-Extended nie wpływa na obecność strony w wyszukiwarce Google ani nie jest używany jako sygnał rankingowy w wyszukiwarce Google. (tłum. AlfaUMi)
Historia zmian
RSSIle naprawdę kosztuje blokada bota — według samych operatorów
GPTBot i ClaudeBot decydują o tym, czy Twoje treści trenują model. OAI-SearchBot i Claude-SearchBot decydują o tym, czy pojawiasz się w wyszukiwaniu ChatGPT i Claude. Ta tabela przedstawiała GPTBota odwrotnie, sugerując, że jego zablokowanie oznacza zniknięcie z ChatGPT. Claude-Web i anthropic-ai są teraz oznaczone jako wycofane, bo Anthropic już ich nie dokumentuje, a doszły trzy wiersze: Google-Agent, Google-GeminiNotebook (nowa nazwa NotebookLM z 16.07.2026) i OAI-AdsBot.
Każdy wiersz mówi teraz, skąd pochodzi
Przy każdym bocie stoi jego pochodzenie: link do strony operatora, która go wymienia, albo do niezależnie prowadzonej listy, albo zwykłe słowo „niepotwierdzony”, gdy nie znaleźliśmy ani jednego, ani drugiego. Sprawdzanie zamiast polegania na pamięci przeniosło sześć linków do dokumentacji, które po cichu zmieniły adres, w tym OpenAI i Anthropic.
Data aktualności jest mierzona, a nie wpisywana
Stopka przez siedem miesięcy podawała luty 2026. Teraz data pochodzi z historii zmian samych danych o botach, więc widocznie się starzeje, zamiast stać w miejscu, a gdy jej brak, strona nie podaje żadnej, zamiast podstawiać datę wdrożenia, za którą nie może ręczyć.
Standardy i niezależne listy
- RFC 9309 — Robots Exclusion Protocol ↗ — standard stojący za każdą regułą robots.txt na tej stronie, łącznie z tym, czego crawler musi, a czego nie musi przestrzegać.
- ai.robots.txt ↗ — prowadzona przez społeczność lista blokowania crawlerów AI, niezależna od nas — szersza niż ta tabela i warta porównania z nią.
Czy Twoja strona jest gotowa na roboty AI?
Uruchom darmową analizę AlfaUMi, żeby sprawdzić robots.txt, dane strukturalne i wynik widoczności w AI.
Przeanalizuj swoją stronęOstatnia zmiana listy botów: . Dane zebrane z publicznych źródeł. Ocena wpływu to szacunek wpływu na widoczność treści. Botów na liście: 54; z linkiem do strony operatora, która je wymienia: 26; potwierdzonych tylko przez niezależną listę: 23; niepotwierdzonych żadnym z tych źródeł: 5 — są na liście i tak oznaczone.