GeoRevealBot

GeoRevealBot je robot scanu GEO / REVEAL. Na web přijde jen tehdy, když o scan jeho adresy někdo požádá na georeveal.cz.

Co dělá

Stáhne robots.txt, sitemapu a veřejné stránky webu a z nich spočítá, jak snadno web přečtou vyhledávače a AI systémy. Neodesílá formuláře, nepřihlašuje se a nespouští skripty stránek. Stránky stahuje jednu po druhé.

Kdy chodí

Jen na žádost: scan zdarma, který někdo zadal na georeveal.cz, nebo pravidelné měření webu v předplatném. Sám od sebe weby neprochází a nesbírá je do žádného vyhledávače.

Kolik stránek stáhne

Scan zdarma stáhne nejvýš 100 stránek, žádný scan víc než 1 000. Mezi dvěma dotazy čeká nejméně 250 ms. Řídí se i pravidlem Crawl-delay do 5 sekund; s delší hodnotou web neprochází vůbec.

Jak ho poznáte v logu

Každý dotaz nese tuto hlavičku:

User-Agent: GeoRevealBot/1.0 (+https://georeveal.cz/robot)

Dotazy chodí z IP adresy 209.200.246.41.

Jak ho zakázat

Do souboru robots.txt na svém webu přidejte:

User-agent: GeoRevealBot
Disallow: /

Robot čte robots.txt před první stránkou každého scanu, zákaz tedy platí od dalšího scanu a jeho výsledek řekne, že web roboty blokuje. Pravidla pro skupinu GeoRevealBot mají přednost před skupinou s hvězdičkou. Platí i skupina pod starým jménem robota GeoAuditBot.

Nástroj „Vidí váš web ChatGPT?“

Tenhle nástroj stáhne robots.txt a úvodní stránku webu: jednou jako běžný prohlížeč a jednou za každého zkoumaného AI robota pod jeho jménem s poznámkou, že jde o zkušební dotaz, ne o skutečného robota. Tak zjistí, jestli web nebo firewall robota pustí. Jiné stránky nestahuje a zákaz pro GeoRevealBot tyhle dotazy nezastaví: zkoumají právě to, jak web na roboty odpovídá.

Kontakt

Otázky a stížnosti na robota posílejte na info@georeveal.cz. Kdo web provozuje, najdete na stránce Kontakt.