Google-Extended
Google-Extended er et robots.txt-token, ikke en egen crawler. Det styrer om innhold som Google har crawlet, kan brukes til å trene fremtidige Gemini-modeller og til grounding i Gemini Apps og Vertex AI. Google sier at det ikke påvirker om nettstedet er med i Google Søk.
Hva den gjør
Google-Extended har ingen egen user agent. Crawlingen gjøres med Googles eksisterende user agents, og Google-Extended-tokenet brukes som kontroll: det forteller Google om innhold den har crawlet, kan brukes til å trene fremtidige generasjoner av Gemini-modeller og til grounding i Gemini Apps og Vertex AI.
Google sier at Google-Extended ikke påvirker om et nettsted er med i Google Søk. Googles AI-funksjoner i Søk, som AI Overviews, styres av Googlebot-reglene og snippet-kontrollene, ikke av dette tokenet.
I undersøkelsen vår fra 2026-11 blokkerte 18.1% av de populære nettstedene med robots.txt den. →
robots.txt-token
Google-Extended
Slik tillater du den
User-agent: Google-Extended
Allow: /Slik blokkerer du den
User-agent: Google-Extended
Disallow: /Slik verifiserer du ekte besøk
Det er ingenting å verifisere i loggene dine: Google-Extended vises aldri som user agent. Forespørslene bak kommer fra Googles vanlige crawlere, som du kan verifisere med et omvendt DNS-oppslag (googlebot.com, google.com eller googleusercontent.com) etterfulgt av et vanlig oppslag, eller mot Googles publiserte IP-områder.
Sjekk om nettstedet ditt slipper den inn →
robots.txt for AI-crawlere: hva du bør tillate og blokkere →