Изважда ли блокирането на Google-Extended сайта ви от AI Overviews и AI Mode?
Не, според документацията на Google. Google-Extended управлява използването на съдържанието ви за обучение на моделите Gemini и за обосноваване в Gemini Apps и Vertex AI. AI Overviews и AI Mode използват страници, които Googlebot обхожда за Search. За да ги ограничите, Google посочва настройките за откъси, noindex и настройка в Search Console, която изключва сайта от тези функции.
Google-Extended често се описва като начина да държите сайта си далеч от AI на Google. Това е вярно само отчасти и разликата създава объркване и в двете посоки: някои сайтове го блокират с очакването да изчезнат от AI Overviews и не виждат промяна, други го избягват от страх да не загубят трафик от търсенето. Собствената документация на Google е доста конкретна за това какво прави всяка настройка. Ето какво казва тя, къде страниците не са напълно последователни и какво да проверите на сайта си.
На тази страница
Какво е Google-Extended?
Google описва Google-Extended като самостоятелен продуктов токен, който издателите могат да използват в robots.txt. Той няма собствен бот и собствен низ за user agent; съществуващите ботове на Google изтеглят страниците, а токенът определя как може да се използва това съдържание.
Според документацията на Google за ботовете той обхваща две употреби: обучение на бъдещи поколения модели Gemini, на които работят Gemini Apps и Vertex AI API за Gemini, и обосноваване (grounding), т.е. съдържание от индекса на Google Search, подавано на модела в момента на заявката, в Gemini Apps и в Grounding with Google Search във Vertex AI. На същата страница се казва, че Google-Extended не влияе на включването на сайта в Google Search и не се използва като сигнал за класиране.
User-agent: Google-Extended
Disallow: / Влияе ли блокирането на Google-Extended на AI Overviews или AI Mode?
Документацията на Google не посочва AI Overviews или AI Mode сред употребите, които Google-Extended управлява. Ръководството на Google за AI функциите казва, че страницата може да се появи като подкрепяща връзка в AI Overviews или AI Mode, ако е индексирана и може да се показва в Google Search с откъс, без допълнителни технически изисквания. Като начин за управление на обхождането в Search то посочва правилата в robots.txt за Googlebot, а не за Google-Extended.
Така че според описанието на Google страница, която Googlebot може да обхожда и индексира и която може да показва откъс, пак може да се появява в AI Overviews и AI Mode, когато Google-Extended е забранен.
Има един нюанс, който си струва да се каже ясно. Помощната страница на Search Console за новата AI настройка на Google казва, че за да ограничите обучението на моделите, които генерират отговорите във функциите с генеративен AI в търсенето, трябва да използвате Google-Extended. Документацията на Google за ботовете споменава при този токен само Gemini Apps и Vertex AI. Двете страници описват обхвата по различен начин. Нито една не казва, че блокирането на токена изважда сайта от AI Overviews.
Какво всъщност определя дали се появявате в AI Overviews и AI Mode?
Google документира тези настройки, от най-тясната до най-широката:
nosnippet: Google казва, че това правило не позволява и съдържанието да се използва като пряк вход за AI Overviews и AI Mode. То премахва и обичайния текстов откъс в резултатите от търсенето.max-snippet: ограничението на дължината важи и за това колко съдържание може да се използва като пряк вход за AI Overviews и AI Mode.data-nosnippet: изключва маркирани части от страницата от откъсите. Документацията на Google за него не споменава конкретно AI Overviews или AI Mode.- Настройката за генеративен AI в търсенето в Search Console: настройка за целия сайт с опции Include, Exclude и, за дъщерни ресурси, Inherit. Изключеното съдържание не се появява в AI Overviews, AI Mode или функциите с генеративен AI в Discover и не получава трафик или показвания от тях. Google казва, че е пуснала настройката за всички уебсайтове по света от 31 август 2026 г., че изключването обикновено влиза в сила за 1 до 2 дни и че тя не е сигнал за класиране или включване за останалата част от Search.
noindexили забрана заGooglebot: те изваждат страницата изцяло от Google Search, а с това и от AI функциите.
Google казва също, че за появяване в AI Overviews или AI Mode не е нужно специално маркиране schema.org или друга оптимизация.
Какво става, ако вместо това блокирам Googlebot?
Блокирането на Googlebot е най-грубият вариант. Google казва, че предпочитанията за обхождане, насочени към него, засягат Google Search, включително Discover и всички функции на Search. Сайт, който забранява Googlebot, губи обичайните си резултати в търсенето заедно с цитиранията си в AI Overviews и AI Mode.
Малко големи сайтове правят това. В нашето проучване на файловете robots.txt на 1000-те най-популярни домейна 94 от 518-те сайта с robots.txt (18,1%) забраняваха началната страница за Google-Extended, а само 14 (2,7%) – за Googlebot. Проучването обхваща правилата в robots.txt само за началната страница и не може да покаже какво са очаквали тези сайтове от правилото.
Как да проверя какво вижда Google на сайта ми?
Ако страниците ви липсват в AI Overviews или AI Mode, минете през същата верига като за обичайните резултати от търсенето:
- Индексиране: използвайте инструмента за проверка на URL адреси в Search Console, за да потвърдите, че страницата е индексирана и че
Googlebotе успял да я изтегли. - Откъси: проверете robots мета тага и заглавката
X-Robots-Tagна страницата заnosnippet, малка стойност наmax-snippetилиnoindex. - Настройката за генеративен AI в търсенето в Search Console: проверете я за ресурса на домейна си и помнете, че дъщерните ресурси по подразбиране наследяват настройката на родителския.
- robots.txt: уверете се, че групата за
Googlebotили групата*, ако няма група заGooglebot, разрешава страницата. Група заGoogle-Extendedне променя това. - Защитна стена: уверете се, че CDN или защитата от ботове не блокира ботовете на Google и не им показва проверка. Проверете Googlebot чрез обратен DNS или публикуваните IP диапазони на Google, преди да го пропуснете.
- Рендиране: Google рендира JavaScript, но текстът в първоначалния HTML остава най-сигурният избор и точно той е нужен на повечето други AI ботове.
Дори когато всички проверки минават успешно, Google решава кои страници да показва за всяка заявка. Да отговаряте на условията не е същото като да бъдете показани.
Къде да видя трафика от AI Overviews?
Google казва, че трафикът от сайтове, които се появяват в AI функциите, е включен в общия трафик от търсенето в отчета за ефективността в Search Console. С настройките от 2026 г. Google обяви и данни за генеративния AI в Search Console, които показват показванията и кои страници се появяват в AI отговорите, и каза, че ще последват още показатели. Не можете да видите Google-Extended в логовете на сървъра си, защото той няма собствен user agent.
AISeeWhy проверява robots.txt ви и за Googlebot, и за Google-Extended, тества дали ботът на Google получава същата страница като браузъра и отчита правилата nosnippet и noindex, които биха държали страницата извън AI Overviews и AI Mode.
Следващи стъпки
- robots.txt тестер и проверка за AI ботове
- Проверка на IP на AI ботове
- Вижте пример за пълен отчет
- Наблюдение на AI ботове
- Планове и цени
Ботове в тази статия
Често задавани въпроси
Ще навреди ли блокирането на Google-Extended на класирането ми в Google?
Google казва, че Google-Extended не влияе на включването в Google Search и не се използва като сигнал за класиране.
Как да държа сайта си извън AI Overviews, но да остана в Google Search?
Google предлага настройка за генеративен AI в търсенето в Search Console, която изключва сайта от AI Overviews, AI Mode и функциите с генеративен AI в Discover, без да засяга останалата част от Search. nosnippet и max-snippet също ограничават използването като пряк вход, но променят и обичайните откъси.
Спира ли AI настройката в Search Console обучението на AI?
Не. Помощната страница на Google казва, че настройката не обхваща обучението, и за него препраща към Google-Extended.
Трябва ли ми специално маркиране, за да се появя в AI Overviews?
Google казва, че няма допълнителни изисквания и не са нужни специални структурирани данни schema.org. Страницата трябва да е индексирана и да може да показва откъс.
Google-Extended бот ли е, който мога да блокирам в защитната стена?
Не. Той няма собствен user agent, така че защитната стена не може да го види. Работи само като токен в robots.txt. Блокирането на истинските ботове на Google в защитната стена би засегнало Search.
Източници
- Google: Общи ботове, включително Google-Extended
- Google Search Central: AI функциите и вашият уебсайт
- Google Search Central: Robots мета таг, data-nosnippet и X-Robots-Tag
- Помощ за Google Search Console: Управление на генеративния AI в търсенето
- Google: Нови възможности, контрол и данни за собствениците на уебсайтове
- Google: Проверка на ботовете на Google
- Google Search Central: Основи на JavaScript SEO
- AISeeWhy: Отчет за достъпа на AI ботове, 2026-11