Kas Google-Extendedi blokeerimine eemaldab sind AI-ülevaadetest ja AI-režiimist?
Google'i dokumentatsiooni järgi mitte. Google-Extended juhib sinu sisu kasutamist Gemini mudelite treenimiseks ning vastuste alusena (grounding) Gemini rakendustes ja Vertex AI-s. AI-ülevaated (AI Overviews) ja AI-režiim (AI Mode) kasutavad lehti, mida Googlebot otsingu jaoks roomab. Nende piiramiseks soovitab Google katkendite seadeid, noindex-it ja Search Console'i seadet, mis jätab saidi neist funktsioonidest välja.
Google-Extendedit kirjeldatakse sageli kui viisi hoida oma sait Google'i AI-st eemal. See on tõsi vaid osaliselt ja lõhe tekitab segadust mõlemas suunas: mõni sait blokeerib selle, oodates AI-ülevaadetest kadumist, ega näe mingit muutust, teised väldivad seda, kartes kaotada otsinguliiklust. Google'i enda dokumentatsioon on üsna täpne selle kohta, mida iga seade teeb. Siin on see, mida see ütleb, kus lehed pole täiesti järjekindlad ja mida oma saidil kontrollida.
Sellel lehel
Mis on Google-Extended?
Google kirjeldab Google-Extended-it kui eraldiseisvat tootetunnust, mida väljaandjad saavad robots.txt-s kasutada. Sellel pole oma robotit ega user agent'i stringi; lehti laadivad Google'i olemasolevad robotid ja tunnus juhib seda, kuidas seda sisu tohib kasutada.
Google'i robotite dokumentatsiooni järgi hõlmab see kahte kasutust: Gemini rakendusi ja Vertex AI Gemini API-t toitvate Gemini mudelite tulevaste põlvkondade treenimist ning vastuste alusena kasutamist (grounding), st Google'i otsinguindeksi sisu andmist mudelile päringu ajal, Gemini rakendustes ja Vertex AI funktsioonis Grounding with Google Search. Sama leht ütleb, et Google-Extended ei mõjuta saidi kaasamist Google'i otsingusse ja seda ei kasutata järjestamise signaalina.
User-agent: Google-Extended
Disallow: / Kas Google-Extendedi blokeerimine mõjutab AI-ülevaateid või AI-režiimi?
Google'i dokumentatsioon ei loetle AI-ülevaateid ega AI-režiimi kasutuste hulgas, mida Google-Extended juhib. Google'i AI-funktsioonide juhend ütleb, et leht sobib AI-ülevaadetes või AI-režiimis toetava lingina näitamiseks, kui see on indekseeritud ja sobib Google'i otsingus katkendiga kuvamiseks, ilma täiendavate tehniliste nõueteta. Otsingus roomamise juhtimiseks nimetab see robots.txt reegleid Googlebot-ile, mitte Google-Extended-ile.
Google'i kirjelduse järgi võib seega leht, mida Googlebot tohib roomata ja indekseerida ning millel tohib olla katkend, ilmuda AI-ülevaadetes ja AI-režiimis ka siis, kui Google-Extended on keelatud.
Ühe nüansi tasub selgelt välja öelda. Google'i Search Console'i abileht uuema AI-seade kohta ütleb, et otsingu generatiivsetes AI-funktsioonides vastuseid loovate mudelite treenimise piiramiseks tuleks kasutada Google-Extended-it. Google'i robotite dokumentatsioon mainib selle tunnuse juures ainult Gemini rakendusi ja Vertex AI-d. Kaks lehte kirjeldavad ulatust erinevalt. Kumbki ei ütle, et tunnuse blokeerimine eemaldaks saidi AI-ülevaadetest.
Mis tegelikult otsustab, kas ilmud AI-ülevaadetes ja AI-režiimis?
Google dokumenteerib need seaded kitsaimast laiemani:
nosnippet: Google ütleb, et see reegel takistab ka sisu kasutamist AI-ülevaadete ja AI-režiimi otsese sisendina. Samuti eemaldab see tavalise tekstikatkendi otsingutulemustes.max-snippet: pikkuse piirang kehtib ka selle kohta, kui palju sisu tohib kasutada AI-ülevaadete ja AI-režiimi otsese sisendina.data-nosnippet: jätab lehe märgitud osad katkenditest välja. Google'i dokumentatsioon selle kohta ei maini konkreetselt AI-ülevaateid ega AI-režiimi.- Search Console'i seade Search generative AI: kogu saiti hõlmav seade valikutega Include, Exclude ja alamomaduste puhul Inherit. Välja jäetud sisu ei ilmu AI-ülevaadetes, AI-režiimis ega Discoveri generatiivsetes AI-funktsioonides ning ei saa neist liiklust ega näitamisi. Google ütleb, et tegi seade 31. augustiks 2026 kättesaadavaks kõigile veebisaitidele üle maailma, et väljajätmine jõustub tavaliselt 1–2 päevaga ja et see pole ülejäänud otsingu jaoks järjestamise ega kaasamise signaal.
noindexvõiGooglebot-i keelamine: need viivad lehe Google'i otsingust täielikult välja, mis eemaldab selle ka AI-funktsioonidest.
Google ütleb ka, et AI-ülevaadetes või AI-režiimis ilmumiseks pole vaja erilist schema.org märgendust ega muud optimeerimist.
Mis juhtub, kui blokeerin hoopis Googleboti?
Googlebot-i blokeerimine on kõige jämedam valik. Google ütleb, et sellele suunatud roomamiseelistused mõjutavad Google'i otsingut, sh Discoverit ja kõiki otsingufunktsioone. Sait, mis keelab Googlebot-i, kaotab oma tavalised otsingutulemused koos viidetega AI-ülevaadetes ja AI-režiimis.
Suuri saite, mis seda teevad, on vähe. Meie uuringus, mis vaatas 1000 populaarseima domeeni robots.txt faile, keelas 518-st robots.txt-ga saidist 94 (18,1%) avalehe Google-Extended-ile, aga ainult 14 (2,7%) Googlebot-ile. Uuring hõlmab ainult avalehe robots.txt reegleid ega näita, mida need saidid reeglilt ootasid.
Kuidas kontrollida, mida Google minu saidil näeb?
Kui sinu lehed puuduvad AI-ülevaadetest või AI-režiimist, käi läbi sama ahel nagu tavaliste otsingutulemuste puhul:
- Indekseerimine: kasuta Search Console'i URL-i kontrollimise tööriista, et veenduda, et leht on indekseeritud ja
Googlebotsai selle laadida. - Katkendid: kontrolli lehe robots-metasildist ja päisest
X-Robots-Tag, kas seal onnosnippet, väikemax-snippetväärtus võinoindex. - Search Console'i seade Search generative AI: kontrolli seda oma domeeniomaduse jaoks ja pea meeles, et alamomadused pärivad vaikimisi oma vanema seade.
- robots.txt: veendu, et
Googlebot-i grupp või, kuiGooglebot-i gruppi pole,*grupp lubab lehte.Google-Extended-i grupp seda ei muuda. - Tulemüür: veendu, et sinu CDN või robotikaitse ei blokeeri ega kontrolli Google'i roboteid. Enne lubamist kinnita Googlebot pöörd-DNS-i või Google'i avaldatud IP-vahemike järgi.
- Renderdamine: Google renderdab JavaScripti, kuid tekst esialgses HTML-is on siiski kõige kindlam valik ja just seda vajab enamik teisi AI-roboteid.
Isegi kui kõik kontrollid läbitakse, otsustab Google iga päringu puhul, milliseid lehti näidata. Sobivus ei tähenda veel näitamist.
Kust näen AI-ülevaadete liiklust?
Google ütleb, et AI-funktsioonides ilmuvate saitide liiklus sisaldub Search Console'i tulemuste aruande üldises otsinguliikluses. Koos 2026. aasta seadetega teatas Google ka generatiivse AI ülevaadetest Search Console'is, mis näitavad näitamisi ja seda, millised lehed AI-vastustes ilmuvad, ning lubas lisada veel mõõdikuid. Google-Extended-it ei näe sa oma serveri logides, sest sellel pole oma user agent'it.
AISeeWhy kontrollib sinu robots.txt-d nii Googlebot-i kui ka Google-Extended-i jaoks, testib, kas Google'i robot saab sama lehe mis brauser, ning annab teada nosnippet ja noindex reeglitest, mis hoiaksid lehe AI-ülevaadetest ja AI-režiimist eemal.
Järgmised sammud
- robots.txt testija ja kontrollija AI-robotitele
- AI-robotite IP kontroll
- Vaadake täieliku raporti näidet
- AI-robotite jälgimine
- Paketid ja hinnad
Selles artiklis olevad robotid
Korduma kippuvad küsimused
Kas Google-Extendedi blokeerimine kahjustab mu Google'i järjestust?
Google ütleb, et Google-Extended ei mõjuta Google'i otsingusse kaasamist ja seda ei kasutata järjestamise signaalina.
Kuidas hoida oma sait AI-ülevaadetest eemal, aga jääda Google'i otsingusse?
Google pakub Search Console'is seadet Search generative AI, mis jätab saidi välja AI-ülevaadetest, AI-režiimist ja Discoveri generatiivsetest AI-funktsioonidest, mõjutamata ülejäänud otsingut. Ka nosnippet ja max-snippet piiravad kasutamist otsese sisendina, kuid muudavad ka tavalisi katkendeid.
Kas Search Console'i AI-seade peatab AI treenimise?
Ei. Google'i abileht ütleb, et seade ei hõlma treenimist, ja viitab selleks Google-Extended-ile.
Kas AI-ülevaadetes ilmumiseks on vaja erilist märgendust?
Google ütleb, et täiendavaid nõudeid ega erilisi schema.org struktureeritud andmeid pole vaja. Leht peab olema indekseeritud ja sobima katkendiga kuvamiseks.
Kas Google-Extended on robot, mida saan tulemüüris blokeerida?
Ei. Sellel pole oma user agent'it, seega tulemüür seda ei näe. See toimib ainult robots.txt tunnusena. Google'i päris robotite blokeerimine tulemüüris mõjutaks otsingut.
Allikad
- Google: Common crawlers, including Google-Extended
- Google Search Central: AI features and your website
- Google Search Central: Robots meta tag, data-nosnippet and X-Robots-Tag
- Google Search Console Help: Search generative AI control
- Google: New opportunities, control and insights for website owners
- Google: Verifying Google crawlers and fetchers
- Google Search Central: JavaScript SEO basics
- AISeeWhy: AI Crawler Access Report, 2026-11