Adakah menyekat Google-Extended mengeluarkan anda daripada AI Overviews dan AI Mode?
Tidak, menurut dokumentasi Google. Google-Extended mengawal penggunaan kandungan anda untuk latihan model Gemini dan untuk grounding dalam Gemini Apps dan Vertex AI. AI Overviews dan AI Mode menggunakan halaman yang dijelajah Googlebot untuk Search. Untuk menghadkannya, Google menunjuk kepada kawalan snippet, noindex, dan tetapan Search Console yang mengecualikan laman daripada ciri ini.
Google-Extended sering digambarkan sebagai cara untuk mengekalkan laman anda di luar AI Google. Itu hanya separuh benar, dan jurangnya menimbulkan kekeliruan dalam kedua-dua arah: sesetengah laman menyekatnya dengan harapan hilang daripada AI Overviews dan tidak melihat perubahan, manakala yang lain mengelaknya kerana takut kehilangan trafik carian. Dokumentasi Google sendiri agak khusus tentang fungsi setiap kawalan. Berikut ialah apa yang dinyatakannya, di mana halaman-halamannya tidak sepenuhnya konsisten, dan apa yang perlu disemak pada laman anda.
Dalam halaman ini
- Apakah Google-Extended?
- Adakah menyekat Google-Extended menjejaskan AI Overviews atau AI Mode?
- Apakah yang mengawal sama ada anda muncul dalam AI Overviews dan AI Mode?
- Apa yang berlaku jika saya menyekat Googlebot sebaliknya?
- Bagaimanakah saya menyemak apa yang Google lihat pada laman saya?
- Di manakah saya boleh melihat trafik AI Overviews?
Apakah Google-Extended?
Google menerangkan Google-Extended sebagai token produk kendiri yang boleh digunakan penerbit dalam robots.txt. Ia tidak mempunyai crawler dan rentetan user agent tersendiri; crawler sedia ada Google mengambil halaman, dan token itu mengawal cara kandungan tersebut boleh digunakan.
Menurut dokumentasi crawler Google, ia meliputi dua kegunaan: melatih generasi akan datang model Gemini yang menggerakkan Gemini Apps dan API Vertex AI untuk Gemini, dan grounding, iaitu kandungan daripada indeks Google Search yang diberikan kepada model pada masa prompt, dalam Gemini Apps dan dalam Grounding with Google Search pada Vertex AI. Halaman yang sama menyatakan Google-Extended tidak menjejaskan kemasukan sesebuah laman dalam Google Search dan tidak digunakan sebagai isyarat kedudukan.
User-agent: Google-Extended
Disallow: /
Adakah menyekat Google-Extended menjejaskan AI Overviews atau AI Mode?
Dokumentasi Google tidak menyenaraikan AI Overviews atau AI Mode antara kegunaan yang dikawal Google-Extended. Panduan Google tentang ciri AI menyatakan sesebuah halaman layak muncul sebagai pautan sokongan dalam AI Overviews atau AI Mode jika ia diindeks dan layak dipaparkan dalam Google Search dengan snippet, tanpa keperluan teknikal tambahan. Ia menamakan peraturan robots.txt untuk Googlebot, bukan Google-Extended, sebagai kawalan untuk penjelajahan dalam Search.
Maka, menurut penerangan Google, halaman yang boleh dijelajah dan diindeks oleh Googlebot, dan yang boleh memaparkan snippet, masih boleh muncul dalam AI Overviews dan AI Mode apabila Google-Extended dilarang.
Ada satu nuansa yang wajar dinyatakan dengan jelas. Halaman bantuan Search Console Google untuk kawalan AI barunya menyatakan bahawa untuk menghadkan latihan model yang digunakan untuk menjana respons dalam ciri AI generatif Search, anda patut menggunakan Google-Extended. Dokumentasi crawler Google untuk token itu hanya menyebut Gemini Apps dan Vertex AI. Kedua-dua halaman menerangkan skop secara berbeza. Tiada satu pun menyatakan bahawa menyekat token itu mengeluarkan sesebuah laman daripada AI Overviews.
Apakah yang mengawal sama ada anda muncul dalam AI Overviews dan AI Mode?
Google mendokumentasikan kawalan ini, daripada yang paling sempit kepada yang paling luas:
nosnippet: Google menyatakan peraturan ini turut menghalang kandungan daripada digunakan sebagai input langsung untuk AI Overviews dan AI Mode. Ia juga membuang snippet teks biasa dalam hasil carian.max-snippet: had panjang itu turut terpakai kepada jumlah kandungan yang boleh digunakan sebagai input langsung untuk AI Overviews dan AI Mode.data-nosnippet: mengecualikan bahagian halaman yang ditanda daripada snippet. Dokumentasi Google tentangnya tidak menyebut AI Overviews atau AI Mode secara khusus.- Tetapan Search generative AI dalam Search Console: kawalan di seluruh laman dengan pilihan Include, Exclude dan, untuk hartanah anak, Inherit. Kandungan yang dikecualikan tidak muncul dalam AI Overviews, AI Mode atau ciri AI generatif dalam Discover, dan tidak mendapat trafik atau tera daripadanya. Google menyatakan ia melancarkan kawalan ini kepada semua laman web di seluruh dunia mulai 31 Ogos 2026, bahawa pengecualian lazimnya berkuat kuasa dalam masa 1 hingga 2 hari, dan ia bukan isyarat kedudukan atau kemasukan untuk bahagian Search yang lain.
noindexatau laranganGooglebot: ini mengeluarkan halaman daripada Google Search sepenuhnya, yang turut mengeluarkannya daripada ciri AI.
Google juga menyatakan tiada markup schema.org khas atau pengoptimuman lain yang diperlukan untuk muncul dalam AI Overviews atau AI Mode.
Apa yang berlaku jika saya menyekat Googlebot sebaliknya?
Menyekat Googlebot ialah pilihan yang paling kasar. Google menyatakan pilihan penjelajahan yang ditujukan kepadanya menjejaskan Google Search, termasuk Discover dan semua ciri Search. Laman yang melarang Googlebot kehilangan hasil carian biasanya bersama petikan AI Overviews dan AI Mode.
Hanya sedikit laman besar melakukan ini. Dalam kajian kami terhadap fail robots.txt bagi 1,000 domain paling popular, 94 daripada 518 laman yang mempunyai robots.txt (18.1%) melarang halaman utama bagi Google-Extended, manakala hanya 14 (2.7%) berbuat demikian bagi Googlebot. Kajian ini hanya meliputi peraturan robots.txt bagi halaman utama, dan ia tidak dapat menunjukkan apa yang dijangka laman-laman itu daripada peraturan tersebut.
Bagaimanakah saya menyemak apa yang Google lihat pada laman saya?
Jika halaman anda tiada dalam AI Overviews atau AI Mode, lalui rantaian yang sama seperti untuk hasil carian biasa:
- Pengindeksan: gunakan alat URL Inspection dalam Search Console untuk mengesahkan halaman telah diindeks dan
Googlebotdapat mengambilnya. - Snippet: semak tag meta robots halaman dan pengepala
X-Robots-Taguntuknosnippet, nilaimax-snippetyang kecil ataunoindex. - Tetapan Search generative AI dalam Search Console: semaknya untuk hartanah domain anda, dan ingat bahawa hartanah anak mewarisi daripada induknya secara lalai.
- robots.txt: pastikan kumpulan
Googlebot, atau kumpulan*jika tiada kumpulanGooglebot, membenarkan halaman itu. KumpulanGoogle-Extendedtidak mengubah perkara ini. - Firewall: pastikan CDN atau perlindungan bot anda tidak menyekat atau mencabar crawler Google. Sahkan Googlebot melalui reverse DNS atau julat IP yang diterbitkan Google sebelum membenarkannya.
- Rendering: Google merender JavaScript, tetapi teks dalam HTML awal masih pilihan paling selamat, dan itulah yang diperlukan oleh kebanyakan crawler AI lain.
Walaupun semua semakan lulus, Google yang memutuskan halaman mana untuk dipaparkan bagi setiap pertanyaan. Layak tidak sama dengan dipaparkan.
Di manakah saya boleh melihat trafik AI Overviews?
Google menyatakan trafik daripada laman yang muncul dalam ciri AI dimasukkan dalam jumlah trafik carian dalam laporan Performance Search Console. Bersama kawalan 2026, Google turut mengumumkan wawasan AI generatif dalam Search Console, yang menunjukkan tera dan halaman yang muncul dalam respons AI, dan menyatakan lebih banyak metrik akan menyusul. Anda tidak dapat melihat Google-Extended dalam log pelayan anda, kerana ia tidak mempunyai user agent tersendiri.
AISeeWhy menyemak robots.txt anda untuk Googlebot dan Google-Extended, menguji sama ada crawler Google mendapat halaman yang sama seperti pelayar, dan melaporkan peraturan nosnippet dan noindex yang akan mengekalkan halaman di luar AI Overviews dan AI Mode.
Soalan lazim
Adakah menyekat Google-Extended akan menjejaskan kedudukan saya di Google?
Google menyatakan Google-Extended tidak menjejaskan kemasukan dalam Google Search dan tidak digunakan sebagai isyarat kedudukan.
Bagaimanakah saya mengekalkan laman saya di luar AI Overviews tetapi kekal dalam Google Search?
Google menawarkan tetapan Search generative AI dalam Search Console yang mengecualikan laman daripada AI Overviews, AI Mode dan ciri AI generatif dalam Discover tanpa menjejaskan bahagian Search yang lain. nosnippet dan max-snippet juga menghadkan penggunaan sebagai input langsung, tetapi ia turut mengubah snippet biasa.
Adakah tetapan AI Search Console menghentikan latihan AI?
Tidak. Halaman bantuan Google menyatakan tetapan itu tidak meliputi latihan dan menunjuk kepada Google-Extended untuk itu.
Adakah saya memerlukan markup khas untuk muncul dalam AI Overviews?
Google menyatakan tiada keperluan tambahan atau data berstruktur schema.org khas yang diperlukan. Halaman mesti diindeks dan layak memaparkan snippet.
Adakah Google-Extended crawler yang boleh saya sekat dalam firewall?
Tidak. Ia tidak mempunyai user agent tersendiri, jadi firewall tidak dapat melihatnya. Ia hanya berfungsi sebagai token robots.txt. Menyekat crawler sebenar Google di firewall akan menjejaskan Search.
Sumber
- Google: Common crawlers, including Google-Extended
- Google Search Central: AI features and your website
- Google Search Central: Robots meta tag, data-nosnippet and X-Robots-Tag
- Google Search Console Help: Search generative AI control
- Google: New opportunities, control and insights for website owners
- Google: Verifying Google crawlers and fetchers
- Google Search Central: JavaScript SEO basics
- AISeeWhy: AI Crawler Access Report, 2026-11