Google-Extended
Google-Extended е токен за robots.txt, а не отделен бот. Той определя дали съдържанието, обходено от Google, може да се използва за обучение на бъдещи модели Gemini и за обосноваване (grounding) в Gemini Apps и Vertex AI. Google казва, че той не влияе на включването на сайта в Google Search.
Как да го допуснете
User-agent: Google-Extended
Allow: / Как да го блокирате
User-agent: Google-Extended
Disallow: / Какво прави
Google-Extended няма собствен user agent. Обхождането се извършва със съществуващите user agent на Google, а токенът Google-Extended се използва за контрол: той казва на Google дали обходеното съдържание може да се използва за обучение на бъдещи поколения модели Gemini и за обосноваване в Gemini Apps и Vertex AI.
Google заявява, че Google-Extended не влияе на включването на сайта в Google Search. AI функциите на Google в търсенето, като AI Overviews, се управляват от правилата за Googlebot и настройките за откъси, а не от този токен.
В нашето проучване от 2026-11 18.1% от популярните сайтове с robots.txt са го блокирали. →
Токен за robots.txt
Google-Extended
Как да проверите истинските посещения
В логовете ви няма какво да се проверява: Google-Extended никога не се появява като user agent. Заявките зад него идват от обичайните ботове на Google, които можете да проверите с обратно DNS търсене (googlebot.com, google.com или googleusercontent.com), последвано от право търсене, или чрез публикуваните IP диапазони на Google.
Проверете дали сайтът ви го допуска →
robots.txt за AI ботове: какво да разрешите и какво да блокирате →