Google-Extended
Google-Extended je token robots.txt, nie samostatný crawler. Riadi, či sa obsah prejdený spoločnosťou Google môže použiť na trénovanie budúcich modelov Gemini a na grounding v aplikáciách Gemini a vo Vertex AI. Google uvádza, že nemá vplyv na zaradenie webu do Vyhľadávania Google.
Ako ho povoliť
User-agent: Google-Extended
Allow: / Ako ho zablokovať
User-agent: Google-Extended
Disallow: / Čo robí
Google-Extended nemá vlastného user agenta. Prechádzanie sa robí existujúcimi user agentmi Google a token Google-Extended slúži na kontrolu: hovorí Google, či sa obsah, ktorý prešiel, môže použiť na trénovanie budúcich generácií modelov Gemini a na grounding v aplikáciách Gemini a vo Vertex AI.
Google uvádza, že Google-Extended neovplyvňuje zaradenie webu do Vyhľadávania Google. AI funkcie Google vo Vyhľadávaní, napríklad AI Overviews, sa riadia pravidlami pre Googlebot a ovládaním úryvkov, nie týmto tokenom.
V našej štúdii z obdobia 2026-11 ho zablokovalo 18.1% populárnych webov s robots.txt. →
Token robots.txt
Google-Extended
Ako overiť skutočné návštevy
Vo vašich logoch nie je čo overovať: Google-Extended sa nikdy neobjaví ako user agent. Požiadavky za ním pochádzajú od bežných crawlerov Google, ktoré môžete overiť reverzným vyhľadávaním DNS (googlebot.com, google.com alebo googleusercontent.com) a následným priamym vyhľadávaním, alebo porovnaním so zverejnenými rozsahmi IP Google.