Google-Extended

Google · Обучение на AI

Google-Extended е токен за robots.txt, а не отделен бот. Той определя дали съдържанието, обходено от Google, може да се използва за обучение на бъдещи модели Gemini и за обосноваване (grounding) в Gemini Apps и Vertex AI. Google казва, че той не влияе на включването на сайта в Google Search.

Как да го допуснете

User-agent: Google-Extended
Allow: /

Как да го блокирате

User-agent: Google-Extended
Disallow: /

Какво прави

Google-Extended няма собствен user agent. Обхождането се извършва със съществуващите user agent на Google, а токенът Google-Extended се използва за контрол: той казва на Google дали обходеното съдържание може да се използва за обучение на бъдещи поколения модели Gemini и за обосноваване в Gemini Apps и Vertex AI.

Google заявява, че Google-Extended не влияе на включването на сайта в Google Search. AI функциите на Google в търсенето, като AI Overviews, се управляват от правилата за Googlebot и настройките за откъси, а не от този токен.

В нашето проучване от 2026-11 18.1% от популярните сайтове с robots.txt са го блокирали. →

Токен за robots.txt

Google-Extended

Как да проверите истинските посещения

В логовете ви няма какво да се проверява: Google-Extended никога не се появява като user agent. Заявките зад него идват от обичайните ботове на Google, които можете да проверите с обратно DNS търсене (googlebot.com, google.com или googleusercontent.com), последвано от право търсене, или чрез публикуваните IP диапазони на Google.

Проверете дали сайтът ви го допуска →

robots.txt за AI ботове: какво да разрешите и какво да блокирате →