Co ukázala studie AI robotů na 14 844 českých firemních webech
Kolik českých firemních webů blokuje v robots.txt roboty OpenAI, Anthropic a Perplexity a proč to většinou není rozhodnutí. Měřeno 19. 9. 2026, každý podíl s jmenovatelem.
Co jsme měřili
Ve vzorku je 14 844 domén z českého žebříčku Chrome UX Report, na kterých jsme našli IČO ověřené v ARES. Odpovědělo 14 753 z 14 844 domén (99,4 %). Robots.txt vrátilo 13 744 z 14 753 odpovídajících domén (93,2 %) a tohle číslo je jmenovatel všech dalších podílů. Měřeno 19. 9. 2026, na každé doméně jeden požadavek na robots.txt (vlastní měření [S104]).
Roboti, kteří trénují modely
GPTBot stahuje obsah, který může OpenAI použít k trénování svých modelů (potvrzeno [S39]). Výslovně ho blokuje 247 z 13 744 webů (1,8 %). ClaudeBot sbírá obsah pro možné trénování modelů Anthropic (potvrzeno [S42]) a výslovně ho blokuje 250 z 13 744 webů (1,8 %). Aspoň jednoho trénovacího robota blokuje 417 z 13 744 webů (3,0 %).
Vlastní pravidlo pro GPTBota má jen 606 z 13 744 webů (4,4 %). Ostatní o něm mlčí a platí pro něj skupina *.
Roboti, kteří hledají
OAI-SearchBot prochází web pro vyhledávání v ChatGPT (potvrzeno [S39]). PerplexityBot hledá pro Perplexity a k trénování modelů neslouží (potvrzeno [S43]). Výslovně blokuje OAI-SearchBot 48 z 13 744 webů (0,3 %), PerplexityBot 82 z 13 744 (0,6 %) a Googlebot 0 z 13 744 (0,0 %). Aspoň jednoho vyhledávacího robota výslovně blokuje 176 z 13 744 webů (1,3 %).
Co z toho plyne
Blokování AI robotů je v českém vzorku výjimka. Většina webů tyto roboty vůbec nezmiňuje, což není souhlas, jen chybějící rozhodnutí (potvrzeno [S104]). Čísla platí k datu měření a pro tenhle vzorek, tedy weby s nalezeným IČO, ne pro celý český internet.
Robots.txt je přání pro roboty, kteří ho dodržují, ne zámek (potvrzeno [S05]). Říká, co provozovatel chce, ne co robot opravdu dělá.
Celá data jsou ve studii AI robotů. Jak je na tom váš web, ověří do minuty nástroj Vidí váš web ChatGPT?
Zdroje
- [S104] GEO/SEO knowledge repo: „Stav GEO připravenosti českých firem 2026: co říká robots.txt 14 844 firemních webů“, https://github.com/troy-168/GEO-SEO/blob/main/docs/public/studie-stav-geo-cz-2026.md, přečteno 19. 9. 2026.
- [S39] OpenAI: „Overview of OpenAI Crawlers“, https://developers.openai.com/api/docs/bots, přečteno 19. 9. 2026.
- [S42] Anthropic / Claude Help Center: „Anthropic web crawler controls“, https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler, přečteno 19. 9. 2026.
- [S43] Perplexity: „Perplexity Crawlers“, https://docs.perplexity.ai/docs/resources/perplexity-crawlers, přečteno 19. 9. 2026.
- [S05] IETF / RFC Editor: „RFC 9309: Robots Exclusion Protocol“, https://www.rfc-editor.org/rfc/rfc9309.html, přečteno 25. 8. 2026.