Googlebot

Google · Iskalnik

Googlebot je Googlov glavni pajek za gradnjo iskalnih indeksov. Google navaja, da so pravila robots.txt za Googlebot način nadzora, kako je spletno mesto pregledano za Search, vključno s funkcijami UI, kot sta AI Overviews in AI Mode. Če ga blokirate, se vaše strani odstranijo iz Google Search in teh odgovorov UI.

Kako ga dovoliti

User-agent: Googlebot
Allow: /

Kako ga blokirati

User-agent: Googlebot
Disallow: /

Kaj počne

Googlebot se uporablja za iskanje informacij za gradnjo Googlovih iskalnih indeksov. Nastavitve pregledovanja za oznako Googlebot vplivajo na Google Search in izdelke, kot so Google Images, Video, Google News in Discover. Deluje kot pajek za pametne telefone in kot pajek za namizje; oba upoštevata ista pravila za Googlebot, Google pa navaja, da njegovi splošni pajki pri samodejnem pregledovanju vedno upoštevajo robots.txt.

Googlova dokumentacija o funkcijah UI pravila za Googlebot opisuje kot način nadzora za Search, vključno z AI Overviews in AI Mode, za omejevanje prikazanega pa navaja nosnippet, data-nosnippet, max-snippet in noindex. Uporabo za učenje Gemini ločeno nadzoruje Google-Extended.

V naši raziskavi iz obdobja 2026-11 ga je blokiralo 2.7% priljubljenih spletnih mest z datoteko robots.txt. →

Oznaka v robots.txt

Googlebot

Niz user agent

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36

Kako preveriti prave obiske

Google navaja, da je nize user agent mogoče ponarediti, in priporoča preverjanje DNS v dveh korakih. Za IP, s katerega prihaja zahteva, izvedite obratno poizvedbo DNS: ime gostitelja se mora končati z googlebot.com, google.com ali googleusercontent.com. Nato za to ime gostitelja izvedite navadno poizvedbo in potrdite, da vrne isti IP. Google objavlja tudi obsege IP svojih splošnih pajkov kot JSON, zato lahko naslove primerjate samodejno.

Preverite, ali ga vaše spletno mesto spusti →

AEO in SEO: kaj je enako in kaj se spremeni pri odgovorih UI →