Дали блокирањето на Google-Extended ве отстранува од AI Overviews и AI Mode?
Не, според документацијата на Google. Google-Extended ја контролира употребата на вашата содржина за обука на моделите Gemini и за поткрепување (grounding) во Gemini Apps и Vertex AI. AI Overviews и AI Mode користат страници што Googlebot ги обиколува за пребарувањето. За да ги ограничите, Google упатува на контролите за извадоци, noindex и поставка во Search Console што го исклучува сајтот од овие функции.
Google-Extended често се опишува како начин да го држите сајтот подалеку од AI на Google. Тоа е само делумно точно, а јазот предизвикува забуна во двете насоки: некои сајтови го блокираат очекувајќи да исчезнат од AI Overviews и не гледаат никаква промена, други го избегнуваат од страв дека ќе изгубат сообраќај од пребарување. Документацијата на самиот Google е прилично прецизна за тоа што прави секоја контрола. Еве што пишува таму, каде страниците не се целосно усогласени и што да проверите на вашиот сајт.
На оваа страница
- Што е Google-Extended?
- Дали блокирањето на Google-Extended влијае на AI Overviews или AI Mode?
- Што всушност контролира дали ќе се појавите во AI Overviews и AI Mode?
- Што се случува ако наместо тоа го блокирам Googlebot?
- Како да проверам што гледа Google на мојот сајт?
- Каде да го видам сообраќајот од AI Overviews?
Што е Google-Extended?
Google го опишува Google-Extended како самостојна ознака на производ што издавачите можат да ја користат во robots.txt. Нема свој краулер ниту свој user agent; постојните краулери на Google ги преземаат страниците, а ознаката контролира како смее да се користи таа содржина.
Според документацијата за краулерите на Google, опфаќа две употреби: обука на идните генерации модели Gemini што ги покреќаат Gemini Apps и Vertex AI API за Gemini, и поткрепување (grounding), односно содржина од индексот на Google Search што му се дава на моделот во моментот на барањето, во Gemini Apps и во Grounding with Google Search на Vertex AI. Истата страница наведува дека Google-Extended не влијае на вклучувањето на сајтот во Google Search и не се користи како сигнал за рангирање.
User-agent: Google-Extended
Disallow: / Дали блокирањето на Google-Extended влијае на AI Overviews или AI Mode?
Документацијата на Google не ги наведува AI Overviews или AI Mode меѓу употребите што ги контролира Google-Extended. Водичот на Google за AI функциите вели дека страницата е подобна да се појави како врска за поддршка во AI Overviews или AI Mode ако е индексирана и подобна да се прикаже во Google Search со извадок, без дополнителни технички барања. Како контрола за обиколувањето во пребарувањето ги именува правилата во robots.txt за Googlebot, а не за Google-Extended.
Значи, според описот на Google, страница што Googlebot смее да ја обиколи и индексира и што смее да прикаже извадок, сепак може да се појави во AI Overviews и AI Mode кога Google-Extended е забранет.
Има една нијанса што вреди да се каже јасно. Страницата за помош на Search Console за новата AI контрола на Google вели дека за ограничување на обуката на моделите што генерираат одговори во функциите на генеративна AI во пребарувањето треба да користите Google-Extended. Документацијата за краулерите на Google за оваа ознака ги споменува само Gemini Apps и Vertex AI. Двете страници го опишуваат опфатот различно. Ниту една не вели дека блокирањето на ознаката го отстранува сајтот од AI Overviews.
Што всушност контролира дали ќе се појавите во AI Overviews и AI Mode?
Google ги документира овие контроли, од најтесната до најшироката:
nosnippet: Google наведува дека ова правило ја спречува и употребата на содржината како директен влез за AI Overviews и AI Mode. Го отстранува и обичниот текстуален извадок во резултатите од пребарување.max-snippet: ограничувањето на должината важи и за тоа колку содржина смее да се користи како директен влез за AI Overviews и AI Mode.data-nosnippet: ги исклучува означените делови од страницата од извадоците. Документацијата на Google за него не ги споменува посебно AI Overviews ниту AI Mode.- Поставката Search generative AI во Search Console: контрола за целиот сајт со опциите Include, Exclude и, за подредени својства, Inherit. Исклучената содржина не се појавува во AI Overviews, AI Mode ниту во функциите на генеративна AI во Discover и не добива сообраќај ниту прикажувања од нив. Google наведува дека контролата ја воведе за сите веб-сајтови ширум светот од 31 август 2026, дека исклучувањето обично стапува на сила за 1 до 2 дена и дека не е сигнал за рангирање ниту за вклучување за остатокот од пребарувањето.
noindexили забрана заGooglebot: тие целосно ја вадат страницата од Google Search, со што ја отстрануваат и од AI функциите.
Google наведува и дека не се потребни посебни ознаки од schema.org ниту друга оптимизација за да се појавите во AI Overviews или AI Mode.
Што се случува ако наместо тоа го блокирам Googlebot?
Блокирањето на Googlebot е најгрубата опција. Google наведува дека поставките за обиколување упатени до него влијаат на Google Search, вклучително Discover и сите функции на пребарувањето. Сајт што го забранува Googlebot ги губи обичните резултати од пребарување заедно со цитирањата во AI Overviews и AI Mode.
Малку големи сајтови го прават ова. Во нашата студија на robots.txt датотеките на 1.000 најпопуларни домени, 94 од 518 сајтови со robots.txt (18,1%) ја забрануваа почетната страница за Google-Extended, а само 14 (2,7%) го правеа тоа за Googlebot. Студијата ги опфаќа само robots.txt правилата за почетната страница и не може да покаже што очекувале тие сајтови да прави правилото.
Како да проверам што гледа Google на мојот сајт?
Ако вашите страници недостасуваат во AI Overviews или AI Mode, поминете го истиот синџир како за обичните резултати од пребарување:
- Индексирање: користете ја алатката URL Inspection во Search Console за да потврдите дека страницата е индексирана и дека
Googlebotможел да ја преземе. - Извадоци: проверете ги robots meta ознаката на страницата и заглавието
X-Robots-Tagзаnosnippet, мала вредност наmax-snippetилиnoindex. - Поставката Search generative AI во Search Console: проверете ја за својството на вашиот домен и запомнете дека подредените својства стандардно ја наследуваат од надреденото.
- robots.txt: осигурете се дека групата
Googlebot, или групата*ако нема групаGooglebot, ја дозволува страницата. ГрупатаGoogle-Extendedне го менува ова. - Заштитен ѕид: осигурете се дека вашиот CDN или заштитата од ботови не ги блокира ниту ги предизвикува краулерите на Google. Потврдете го Googlebot преку обратен DNS или објавените IP опсези на Google пред да го дозволите.
- Рендерирање: Google рендерира JavaScript, но текстот во почетниот HTML сепак е најбезбедниот избор, а тоа им треба и на повеќето други AI краулери.
Дури и кога сите проверки поминуваат, Google одлучува кои страници ќе ги прикаже за секое барање. Да се биде подобен не значи да се биде прикажан.
Каде да го видам сообраќајот од AI Overviews?
Google наведува дека сообраќајот од сајтовите што се појавуваат во AI функциите е вклучен во вкупниот сообраќај од пребарување во извештајот Performance во Search Console. Со контролите од 2026 Google најави и увиди за генеративната AI во Search Console, кои покажуваат прикажувања и кои страници се појавуваат во AI одговорите, и рече дека ќе следат повеќе метрики. Google-Extended не може да го видите во серверските дневници, бидејќи нема свој user agent.
AISeeWhy го проверува вашиот robots.txt и за Googlebot и за Google-Extended, тестира дали краулерот на Google ја добива истата страница како прелистувачот и известува за правилата nosnippet и noindex што би ја држеле страницата надвор од AI Overviews и AI Mode.
Следни чекори
- Тестер и проверка на robots.txt за AI краулери
- IP проверка на AI краулери
- Погледнете пример за целосен извештај
- Следење на AI краулери
- Планови и цени
Краулери во оваа статија
Често поставувани прашања
Дали блокирањето на Google-Extended ќе му наштети на моето рангирање во Google?
Google наведува дека Google-Extended не влијае на вклучувањето во Google Search и не се користи како сигнал за рангирање.
Како да го држам сајтот надвор од AI Overviews, а да останам во Google Search?
Google нуди поставка Search generative AI во Search Console што го исклучува сајтот од AI Overviews, AI Mode и функциите на генеративна AI во Discover, без да влијае на остатокот од пребарувањето. nosnippet и max-snippet исто така ја ограничуваат употребата како директен влез, но ги менуваат и обичните извадоци.
Дали AI поставката во Search Console ја запира AI обуката?
Не. Страницата за помош на Google вели дека поставката не ја опфаќа обуката и за тоа упатува на Google-Extended.
Дали ми требаат посебни ознаки за да се појавам во AI Overviews?
Google наведува дека нема дополнителни барања ниту потреба од посебни структурирани податоци од schema.org. Страницата мора да биде индексирана и подобна да прикаже извадок.
Дали Google-Extended е краулер што можам да го блокирам во заштитниот ѕид?
Не. Нема свој user agent, па заштитниот ѕид не може да го види. Функционира само како ознака во robots.txt. Блокирањето на вистинските краулери на Google во заштитниот ѕид би влијаело на пребарувањето.
Извори
- Google: Вообичаени краулери, вклучително Google-Extended
- Google Search Central: AI функциите и вашиот веб-сајт
- Google Search Central: Robots meta ознака, data-nosnippet и X-Robots-Tag
- Помош за Google Search Console: Контрола на генеративната AI во пребарувањето
- Google: Нови можности, контрола и увиди за сопствениците на веб-сајтови
- Google: Потврдување на краулерите и преземачите на Google
- Google Search Central: Основи на JavaScript SEO
- AISeeWhy: Извештај за пристапот на AI краулерите, 2026-11