Изважда ли блокирането на Google-Extended сайта ви от AI Overviews и AI Mode?

Публикувано

Кратък отговор

Не, според документацията на Google. Google-Extended управлява използването на съдържанието ви за обучение на моделите Gemini и за обосноваване в Gemini Apps и Vertex AI. AI Overviews и AI Mode използват страници, които Googlebot обхожда за Search. За да ги ограничите, Google посочва настройките за откъси, noindex и настройка в Search Console, която изключва сайта от тези функции.

Google-Extended често се описва като начина да държите сайта си далеч от AI на Google. Това е вярно само отчасти и разликата създава объркване и в двете посоки: някои сайтове го блокират с очакването да изчезнат от AI Overviews и не виждат промяна, други го избягват от страх да не загубят трафик от търсенето. Собствената документация на Google е доста конкретна за това какво прави всяка настройка. Ето какво казва тя, къде страниците не са напълно последователни и какво да проверите на сайта си.

На тази страница
  1. Какво е Google-Extended?
  2. Влияе ли блокирането на Google-Extended на AI Overviews или AI Mode?
  3. Какво всъщност определя дали се появявате в AI Overviews и AI Mode?
  4. Какво става, ако вместо това блокирам Googlebot?
  5. Как да проверя какво вижда Google на сайта ми?
  6. Къде да видя трафика от AI Overviews?

Какво е Google-Extended?

Google описва Google-Extended като самостоятелен продуктов токен, който издателите могат да използват в robots.txt. Той няма собствен бот и собствен низ за user agent; съществуващите ботове на Google изтеглят страниците, а токенът определя как може да се използва това съдържание.

Според документацията на Google за ботовете той обхваща две употреби: обучение на бъдещи поколения модели Gemini, на които работят Gemini Apps и Vertex AI API за Gemini, и обосноваване (grounding), т.е. съдържание от индекса на Google Search, подавано на модела в момента на заявката, в Gemini Apps и в Grounding with Google Search във Vertex AI. На същата страница се казва, че Google-Extended не влияе на включването на сайта в Google Search и не се използва като сигнал за класиране.

User-agent: Google-Extended
Disallow: /

Влияе ли блокирането на Google-Extended на AI Overviews или AI Mode?

Документацията на Google не посочва AI Overviews или AI Mode сред употребите, които Google-Extended управлява. Ръководството на Google за AI функциите казва, че страницата може да се появи като подкрепяща връзка в AI Overviews или AI Mode, ако е индексирана и може да се показва в Google Search с откъс, без допълнителни технически изисквания. Като начин за управление на обхождането в Search то посочва правилата в robots.txt за Googlebot, а не за Google-Extended.

Така че според описанието на Google страница, която Googlebot може да обхожда и индексира и която може да показва откъс, пак може да се появява в AI Overviews и AI Mode, когато Google-Extended е забранен.

Има един нюанс, който си струва да се каже ясно. Помощната страница на Search Console за новата AI настройка на Google казва, че за да ограничите обучението на моделите, които генерират отговорите във функциите с генеративен AI в търсенето, трябва да използвате Google-Extended. Документацията на Google за ботовете споменава при този токен само Gemini Apps и Vertex AI. Двете страници описват обхвата по различен начин. Нито една не казва, че блокирането на токена изважда сайта от AI Overviews.

Какво всъщност определя дали се появявате в AI Overviews и AI Mode?

Google документира тези настройки, от най-тясната до най-широката:

Google казва също, че за появяване в AI Overviews или AI Mode не е нужно специално маркиране schema.org или друга оптимизация.

Какво става, ако вместо това блокирам Googlebot?

Блокирането на Googlebot е най-грубият вариант. Google казва, че предпочитанията за обхождане, насочени към него, засягат Google Search, включително Discover и всички функции на Search. Сайт, който забранява Googlebot, губи обичайните си резултати в търсенето заедно с цитиранията си в AI Overviews и AI Mode.

Малко големи сайтове правят това. В нашето проучване на файловете robots.txt на 1000-те най-популярни домейна 94 от 518-те сайта с robots.txt (18,1%) забраняваха началната страница за Google-Extended, а само 14 (2,7%) – за Googlebot. Проучването обхваща правилата в robots.txt само за началната страница и не може да покаже какво са очаквали тези сайтове от правилото.

Как да проверя какво вижда Google на сайта ми?

Ако страниците ви липсват в AI Overviews или AI Mode, минете през същата верига като за обичайните резултати от търсенето:

Дори когато всички проверки минават успешно, Google решава кои страници да показва за всяка заявка. Да отговаряте на условията не е същото като да бъдете показани.

Къде да видя трафика от AI Overviews?

Google казва, че трафикът от сайтове, които се появяват в AI функциите, е включен в общия трафик от търсенето в отчета за ефективността в Search Console. С настройките от 2026 г. Google обяви и данни за генеративния AI в Search Console, които показват показванията и кои страници се появяват в AI отговорите, и каза, че ще последват още показатели. Не можете да видите Google-Extended в логовете на сървъра си, защото той няма собствен user agent.

AISeeWhy проверява robots.txt ви и за Googlebot, и за Google-Extended, тества дали ботът на Google получава същата страница като браузъра и отчита правилата nosnippet и noindex, които биха държали страницата извън AI Overviews и AI Mode.

Безплатни инструменти

Следващи стъпки

Ботове в тази статия

Често задавани въпроси

Ще навреди ли блокирането на Google-Extended на класирането ми в Google?

Google казва, че Google-Extended не влияе на включването в Google Search и не се използва като сигнал за класиране.

Как да държа сайта си извън AI Overviews, но да остана в Google Search?

Google предлага настройка за генеративен AI в търсенето в Search Console, която изключва сайта от AI Overviews, AI Mode и функциите с генеративен AI в Discover, без да засяга останалата част от Search. nosnippet и max-snippet също ограничават използването като пряк вход, но променят и обичайните откъси.

Спира ли AI настройката в Search Console обучението на AI?

Не. Помощната страница на Google казва, че настройката не обхваща обучението, и за него препраща към Google-Extended.

Трябва ли ми специално маркиране, за да се появя в AI Overviews?

Google казва, че няма допълнителни изисквания и не са нужни специални структурирани данни schema.org. Страницата трябва да е индексирана и да може да показва откъс.

Google-Extended бот ли е, който мога да блокирам в защитната стена?

Не. Той няма собствен user agent, така че защитната стена не може да го види. Работи само като токен в robots.txt. Блокирането на истинските ботове на Google в защитната стена би засегнало Search.

Източници

Още статии