Ar Google-Extended blokavimas pašalina jus iš AI Overviews ir AI Mode?
Pagal Google dokumentaciją – ne. Google-Extended valdo jūsų turinio naudojimą Gemini modeliams mokyti ir Gemini Apps bei Vertex AI atsakymams pagrįsti. AI Overviews ir AI Mode naudoja puslapius, kuriuos Googlebot nuskaito paieškai. Norint juos apriboti, Google nurodo ištraukų valdiklius, noindex ir Search Console nustatymą, kuris pašalina svetainę iš šių funkcijų.
Google-Extended dažnai apibūdinamas kaip būdas apsaugoti svetainę nuo Google DI. Tai tik iš dalies tiesa, ir šis neatitikimas klaidina abiem kryptimis: vienos svetainės jį blokuoja tikėdamosi dingti iš AI Overviews ir nemato jokio pokyčio, kitos jo vengia bijodamos prarasti paieškos srautą. Paties Google dokumentacija gana konkrečiai nurodo, ką daro kiekvienas valdiklis. Štai ką ji sako, kur puslapiai ne visai sutampa ir ką patikrinti savo svetainėje.
Šiame puslapyje
Kas yra Google-Extended?
Google Google-Extended apibūdina kaip savarankišką produkto žymenį, kurį leidėjai gali naudoti robots.txt. Jis neturi nei savo roboto, nei savo user agent eilutės; puslapius atsisiunčia esami Google robotai, o žymuo valdo, kaip tas turinys gali būti naudojamas.
Pagal Google robotų dokumentaciją jis apima du naudojimo būdus: būsimų kartų Gemini modelių, veikiančių Gemini Apps ir Vertex AI API for Gemini, mokymą ir pagrindimą (grounding), t. y. turinio iš Google Search indekso pateikimą modeliui užklausos metu, Gemini Apps ir Grounding with Google Search Vertex AI platformoje. Tame pačiame puslapyje rašoma, kad Google-Extended neturi įtakos svetainės įtraukimui į Google Search ir nenaudojamas kaip reitingavimo signalas.
User-agent: Google-Extended
Disallow: / Ar Google-Extended blokavimas paveikia AI Overviews ar AI Mode?
Google dokumentacijoje AI Overviews ar AI Mode neminimi tarp naudojimo būdų, kuriuos valdo Google-Extended. Google DI funkcijų vadove rašoma, kad puslapis gali būti rodomas kaip pagalbinė nuoroda AI Overviews ar AI Mode, jei jis indeksuotas ir gali būti rodomas Google Search su ištrauka, be jokių papildomų techninių reikalavimų. Kaip nuskaitymo paieškoje valdiklį jis nurodo robots.txt taisykles Googlebot, o ne Google-Extended.
Taigi pagal Google aprašymą puslapis, kurį Googlebot gali nuskaityti ir indeksuoti ir kuris gali rodyti ištrauką, vis tiek gali pasirodyti AI Overviews ir AI Mode, kai Google-Extended uždraustas.
Yra vienas niuansas, kurį verta pasakyti tiesiai. Google Search Console pagalbos puslapyje apie naujesnį DI valdiklį rašoma, kad norint apriboti modelių, generuojančių atsakymus paieškos generatyvinio DI funkcijose, mokymą, reikia naudoti Google-Extended. Google robotų dokumentacijoje apie šį žymenį minimos tik Gemini Apps ir Vertex AI. Šie du puslapiai apimtį apibūdina skirtingai. Nė viename nerašoma, kad žymens blokavimas pašalina svetainę iš AI Overviews.
Kas iš tikrųjų lemia, ar būsite AI Overviews ir AI Mode?
Google dokumentuoja šiuos valdiklius – nuo siauriausio iki plačiausio:
nosnippet: Google teigia, kad ši taisyklė taip pat neleidžia turinio naudoti kaip tiesioginės AI Overviews ir AI Mode įvesties. Ji taip pat pašalina įprastą teksto ištrauką paieškos rezultatuose.max-snippet: ilgio riba taip pat taikoma tam, kiek turinio galima naudoti kaip tiesioginę AI Overviews ir AI Mode įvestį.data-nosnippet: pašalina pažymėtas puslapio dalis iš ištraukų. Google dokumentacijoje apie jį AI Overviews ar AI Mode konkrečiai neminimi.- Search Console nustatymas Search generative AI: visos svetainės valdiklis su parinktimis Include, Exclude ir, antrinėms nuosavybėms, Inherit. Pašalintas turinys nerodomas AI Overviews, AI Mode ar generatyvinio DI funkcijose Discover ir iš jų negauna nei srauto, nei parodymų. Google teigia, kad nuo 2026 m. rugpjūčio 31 d. valdiklis prieinamas visoms svetainėms visame pasaulyje, kad pašalinimas paprastai įsigalioja per 1–2 dienas ir kad tai nėra reitingavimo ar įtraukimo signalas likusiai paieškai.
noindexarbaGooglebotdraudimas: jie visiškai pašalina puslapį iš Google Search, taigi ir iš DI funkcijų.
Google taip pat teigia, kad norint pasirodyti AI Overviews ar AI Mode nereikia jokio specialaus schema.org žymėjimo ar kitokio optimizavimo.
Kas nutinka, jei vietoj to užblokuoju Googlebot?
Googlebot blokavimas yra grubiausias variantas. Google teigia, kad jam skirti nuskaitymo pageidavimai veikia Google Search, įskaitant Discover ir visas paieškos funkcijas. Svetainė, draudžianti Googlebot, praranda įprastus paieškos rezultatus kartu su AI Overviews ir AI Mode citatomis.
Nedaug didelių svetainių taip daro. Mūsų tyrime, kuriame nagrinėjome 1 000 populiariausių domenų robots.txt failus, 94 iš 518 svetainių su robots.txt (18,1 %) draudė pagrindinį puslapį Google-Extended, o Googlebot – tik 14 (2,7 %). Tyrimas apima tik pagrindinio puslapio robots.txt taisykles ir negali parodyti, ko tos svetainės tikėjosi iš taisyklės.
Kaip patikrinti, ką Google mato mano svetainėje?
Jei jūsų puslapių nėra AI Overviews ar AI Mode, patikrinkite tą pačią grandinę kaip ir įprastiems paieškos rezultatams:
- Indeksavimas: Search Console įrankiu URL Inspection įsitikinkite, kad puslapis indeksuotas ir kad
Googlebotgalėjo jį atsisiųsti. - Ištraukos: patikrinkite, ar puslapio robots meta žymoje ir
X-Robots-Tagantraštėje nėranosnippet, mažosmax-snippetreikšmės arnoindex. - Search Console nustatymas Search generative AI: patikrinkite jį savo domeno nuosavybei ir atminkite, kad antrinės nuosavybės pagal numatytuosius nustatymus paveldi iš pagrindinės.
- robots.txt: įsitikinkite, kad
Googlebotgrupė arba, jeiGooglebotgrupės nėra, grupė*leidžia puslapį.Google-Extendedgrupė to nekeičia. - Ugniasienė: įsitikinkite, kad jūsų CDN ar apsauga nuo robotų neblokuoja ir netikrina Google robotų. Prieš įleisdami Googlebot, patvirtinkite jį atvirkštiniu DNS arba pagal Google paskelbtus IP intervalus.
- Atvaizdavimas: Google vykdo JavaScript, bet tekstas pradiniame HTML vis tiek yra saugiausias pasirinkimas, ir būtent jo reikia daugumai kitų DI robotų.
Net kai visi patikrinimai sėkmingi, Google sprendžia, kuriuos puslapius rodyti kiekvienai užklausai. Galimybė būti parodytam nereiškia, kad būsite parodyti.
Kur matyti AI Overviews srautą?
Google teigia, kad srautas iš svetainių, rodomų DI funkcijose, įtraukiamas į bendrą paieškos srautą Search Console ataskaitoje Performance. Kartu su 2026 m. valdikliais Google taip pat paskelbė apie generatyvinio DI įžvalgas Search Console, rodančias parodymus ir tai, kurie puslapiai pasirodo DI atsakymuose, ir pažadėjo daugiau metrikų. Google-Extended savo serverio žurnaluose nepamatysite, nes jis neturi savo user agent.
AISeeWhy tikrina jūsų robots.txt ir Googlebot, ir Google-Extended atžvilgiu, testuoja, ar Google robotas gauna tą patį puslapį kaip naršyklė, ir praneša apie nosnippet ir noindex taisykles, kurios neleistų puslapiui patekti į AI Overviews ir AI Mode.
Kiti žingsniai
- robots.txt testeris ir tikrinimas DI robotams
- DI robotų IP patikra
- Peržiūrėkite pilnos ataskaitos pavyzdį
- DI robotų stebėsena
- Planai ir kainos
Šiame straipsnyje minimi robotai
Dažniausiai užduodami klausimai
Ar Google-Extended blokavimas pakenks mano pozicijoms Google?
Google teigia, kad Google-Extended neturi įtakos įtraukimui į Google Search ir nenaudojamas kaip reitingavimo signalas.
Kaip pašalinti svetainę iš AI Overviews, bet likti Google Search?
Google siūlo Search Console nustatymą Search generative AI, kuris pašalina svetainę iš AI Overviews, AI Mode ir generatyvinio DI funkcijų Discover, nepaveikdamas likusios paieškos. nosnippet ir max-snippet taip pat riboja naudojimą kaip tiesioginę įvestį, bet pakeičia ir įprastas ištraukas.
Ar Search Console DI nustatymas sustabdo DI mokymą?
Ne. Google pagalbos puslapyje rašoma, kad nustatymas neapima mokymo, ir tam nurodomas Google-Extended.
Ar norint pasirodyti AI Overviews reikia specialaus žymėjimo?
Google teigia, kad jokių papildomų reikalavimų ar specialių schema.org struktūrinių duomenų nereikia. Puslapis turi būti indeksuotas ir galėti rodyti ištrauką.
Ar Google-Extended yra robotas, kurį galiu užblokuoti ugniasienėje?
Ne. Jis neturi savo user agent, todėl ugniasienė jo nemato. Jis veikia tik kaip robots.txt žymuo. Tikrų Google robotų blokavimas ugniasienėje paveiktų paiešką.
Šaltiniai
- Google: Bendrieji robotai, įskaitant Google-Extended
- Google Search Central: DI funkcijos ir jūsų svetainė
- Google Search Central: robots meta žyma, data-nosnippet ir X-Robots-Tag
- Google Search Console pagalba: paieškos generatyvinio DI valdymas
- Google: naujos galimybės, valdymas ir įžvalgos svetainių savininkams
- Google: Google robotų ir atsisiuntimo agentų patvirtinimas
- Google Search Central: JavaScript SEO pagrindai
- AISeeWhy: DI robotų prieigos ataskaita, 2026-11