Googlebot

Google · Vyhľadávač

Googlebot je hlavný crawler Google na budovanie vyhľadávacích indexov. Google uvádza, že pravidlá robots.txt pre Googlebot riadia, ako sa web prechádza pre Vyhľadávanie vrátane AI funkcií ako AI Overviews a AI Mode. Jeho zablokovanie odstráni vaše stránky z Vyhľadávania Google aj z týchto AI odpovedí.

Ako ho povoliť

User-agent: Googlebot
Allow: /

Ako ho zablokovať

User-agent: Googlebot
Disallow: /

Čo robí

Googlebot sa používa na hľadanie informácií pre budovanie vyhľadávacích indexov Google. Preferencie prechádzania určené pre token Googlebot ovplyvňujú Vyhľadávanie Google a produkty ako Google Obrázky, Videá, Google News a Discover. Beží ako crawler pre smartfóny aj pre počítače; oba dodržiavajú rovnaké pravidlá pre Googlebot a Google uvádza, že jeho bežné crawlery pri automatickom prechádzaní vždy dodržiavajú robots.txt.

Dokumentácia Google o AI funkciách opisuje pravidlá pre Googlebot ako spôsob kontroly Vyhľadávania vrátane AI Overviews a AI Mode a na obmedzenie toho, čo sa zobrazí, odkazuje na nosnippet, data-nosnippet, max-snippet a noindex. Použitie na trénovanie Gemini sa riadi samostatne cez Google-Extended.

V našej štúdii z obdobia 2026-11 ho zablokovalo 2.7% populárnych webov s robots.txt. →

Token robots.txt

Googlebot

Reťazec user agenta

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36

Ako overiť skutočné návštevy

Google uvádza, že reťazce user agenta sa dajú podvrhnúť, a odporúča dvojkrokovú kontrolu DNS. Spustite reverzné vyhľadávanie DNS pre IP požiadavky: názov hostiteľa má končiť na googlebot.com, google.com alebo googleusercontent.com. Potom spustite priame vyhľadávanie pre tento názov hostiteľa a overte, že vráti tú istú IP. Google tiež zverejňuje rozsahy IP svojich bežných crawlerov ako JSON, takže adresy môžete porovnávať automaticky.

Skontrolujte, či ho váš web pustí →

AEO a SEO: čo zostáva rovnaké a čo sa mení pre odpovede AI →