Да ли вас блокирање Google-Extended уклања из AI Overviews и AI Mode?

Објављено

Кратак одговор

Не, према Google-овој документацији. Google-Extended контролише употребу вашег садржаја за обуку Gemini модела и за утемељивање (grounding) у Gemini апликацијама и Vertex AI. AI Overviews и AI Mode користе странице које Googlebot обилази за претрагу. Да бисте их ограничили, Google упућује на контроле одломака, noindex и подешавање у Search Console-у које искључује сајт из ових функција.

Google-Extended се често описује као начин да свој сајт држите ван Google-овог AI-ја. То је само делимично тачно, а тај јаз изазива забуну у оба смера: неки сајтови га блокирају очекујући да нестану из AI Overviews и не виде никакву промену, други га избегавају из страха да ће изгубити саобраћај из претраге. Google-ова документација је прилично конкретна о томе шта ради која контрола. Ево шта каже, где странице нису потпуно доследне и шта да проверите на свом сајту.

На овој страници
  1. Шта је Google-Extended?
  2. Да ли блокирање Google-Extended утиче на AI Overviews или AI Mode?
  3. Шта онда контролише да ли се појављујете у AI Overviews и AI Mode?
  4. Шта се дешава ако уместо тога блокирам Googlebot?
  5. Како да проверим шта Google види на мом сајту?
  6. Где да видим саобраћај из AI Overviews?

Шта је Google-Extended?

Google описује Google-Extended као самостални токен производа који издавачи могу да користе у robots.txt. Нема сопствени краулер ни user agent стринг; странице преузимају постојећи Google-ови краулери, а токен контролише како се тај садржај сме користити.

Према Google-овој документацији о краулерима, покрива две намене: обуку будућих генерација Gemini модела који покрећу Gemini апликације и Vertex AI API за Gemini, и утемељивање, односно садржај из индекса Google претраге који се моделу даје у тренутку упита, у Gemini апликацијама и у Grounding with Google Search на Vertex AI. Иста страница каже да Google-Extended не утиче на укључивање сајта у Google претрагу и да се не користи као сигнал за рангирање.

User-agent: Google-Extended
Disallow: /

Да ли блокирање Google-Extended утиче на AI Overviews или AI Mode?

Google-ова документација не наводи AI Overviews ни AI Mode међу наменама које Google-Extended контролише. Google-ов водич за AI функције каже да страница може да се појави као пратећи линк у AI Overviews или AI Mode ако је индексирана и може да се прикаже у Google претрази са одломком, без додатних техничких захтева. Као контролу за обилажење у претрази наводи robots.txt правила за Googlebot, а не за Google-Extended.

Дакле, према Google-овом опису, страница коју Googlebot сме да обиђе и индексира и која сме да прикаже одломак и даље може да се појави у AI Overviews и AI Mode када је Google-Extended забрањен.

Постоји једна нијанса коју вреди јасно рећи. Google-ова страница помоћи за Search Console о новијој AI контроли каже да за ограничавање обуке модела који генеришу одговоре у генеративним AI функцијама претраге треба користити Google-Extended. Google-ова документација о краулерима за овај токен помиње само Gemini апликације и Vertex AI. Ове две странице различито описују обим. Ниједна не каже да блокирање токена уклања сајт из AI Overviews.

Шта онда контролише да ли се појављујете у AI Overviews и AI Mode?

Google документује ове контроле, од најуже до најшире:

Google такође каже да за појављивање у AI Overviews или AI Mode није потребна посебна schema.org ознака нити друга оптимизација.

Шта се дешава ако уместо тога блокирам Googlebot?

Блокирање Googlebot-а је најгрубља опција. Google каже да подешавања обиласка упућена њему утичу на Google претрагу, укључујући Discover и све функције претраге. Сајт који забрани Googlebot губи обичне резултате претраге заједно са цитатима у AI Overviews и AI Mode.

Мало великих сајтова то ради. У нашем истраживању robots.txt фајлова 1000 најпопуларнијих домена, 94 од 518 сајтова са robots.txt (18,1%) забранило је почетну страницу за Google-Extended, а само 14 (2,7%) за Googlebot. Истраживање покрива само robots.txt правила за почетну страницу и не може да покаже шта су ти сајтови очекивали од правила.

Како да проверим шта Google види на мом сајту?

Ако ваше странице недостају у AI Overviews или AI Mode, прођите кроз исти ланац као за обичне резултате претраге:

Чак и када све провере прођу, Google одлучује које ће странице приказати за сваки упит. Испуњавање услова није исто што и приказивање.

Где да видим саобраћај из AI Overviews?

Google каже да је саобраћај са сајтова који се појављују у AI функцијама укључен у укупан саобраћај из претраге у извештају Performance у Search Console-у. Уз контроле из 2026. Google је најавио и увиде о генеративном AI у Search Console-у, који приказују приказе и које странице се појављују у AI одговорима, и рекао да ће уследити још метрика. Google-Extended не можете да видите у логовима сервера, јер нема сопствени user agent.

AISeeWhy проверава ваш robots.txt и за Googlebot и за Google-Extended, тестира да ли Google-ов краулер добија исту страницу као прегледач и пријављује правила nosnippet и noindex која би страницу држала ван AI Overviews и AI Mode.

Бесплатни алати

Следећи кораци

Краулери у овом чланку

Честа питања

Да ли ће блокирање Google-Extended нашкодити мом рангирању на Google-у?

Google каже да Google-Extended не утиче на укључивање у Google претрагу и да се не користи као сигнал за рангирање.

Како да свој сајт држим ван AI Overviews, а да останем у Google претрази?

Google нуди подешавање Search generative AI у Search Console-у које искључује сајт из AI Overviews, AI Mode и генеративних AI функција у Discover-у, без утицаја на остатак претраге. nosnippet и max-snippet такође ограничавају употребу као директног улаза, али мењају и обичне одломке.

Да ли AI подешавање у Search Console-у зауставља AI обуку?

Не. Google-ова страница помоћи каже да подешавање не обухвата обуку и за то упућује на Google-Extended.

Да ли ми је потребна посебна ознака да бих се појавио у AI Overviews?

Google каже да нема додатних захтева нити је потребна посебна schema.org структура података. Страница мора бити индексирана и испуњавати услове за приказ одломка.

Да ли је Google-Extended краулер који могу да блокирам у заштитном зиду?

Није. Нема сопствени user agent, па га заштитни зид не може видети. Функционише само као robots.txt токен. Блокирање Google-ових стварних краулера у заштитном зиду утицало би на претрагу.

Извори

Још чланака