封鎖 Google-Extended 會讓你退出 AI Overviews 與 AI Mode 嗎?
依據 Google 的文件,不會。Google-Extended 控制你的內容是否用於 Gemini 模型訓練,以及用於 Gemini Apps 和 Vertex AI 中的 grounding。AI Overviews 與 AI Mode 使用 Googlebot 為搜尋爬取的頁面。要限制它們,Google 指向摘錄控制、noindex,以及 Search Console 中將網站排除在這些功能之外的設定。
Google-Extended 常被描述為讓網站遠離 Google AI 的方法。這只說對了一部分,而這個落差在兩個方向上都造成了困惑:有些網站封鎖它是想從 AI Overviews 中消失,結果毫無變化;另一些網站則因擔心損失搜尋流量而避開它。Google 自己的文件對每項控制的作用說得相當具體。以下是文件中的說法、各頁面不完全一致之處,以及你應該在自己的網站上檢查什麼。
本頁內容
什麼是 Google-Extended?
Google 將 Google-Extended 描述為發布者可以在 robots.txt 中使用的獨立產品 token。它沒有自己的爬蟲,也沒有自己的 user agent 字串;頁面由 Google 現有的爬蟲擷取,而這個 token 控制該內容可以如何使用。
依據 Google 的爬蟲文件,它涵蓋兩種用途:訓練為 Gemini Apps 與 Gemini 的 Vertex AI API 提供支援的未來幾代 Gemini 模型;以及 grounding,也就是在提示當下把來自 Google 搜尋索引的內容提供給模型,用於 Gemini Apps 和 Vertex AI 上的 Grounding with Google Search。同一頁面還表示,Google-Extended 不影響網站在 Google 搜尋中的收錄,也不作為排名訊號。
User-agent: Google-Extended
Disallow: /
封鎖 Google-Extended 會影響 AI Overviews 或 AI Mode 嗎?
Google 的文件沒有把 AI Overviews 或 AI Mode 列在 Google-Extended 所控制的用途中。Google 的 AI 功能指南表示,只要頁面已被編入索引,並且有資格在 Google 搜尋中以摘錄形式顯示,就有資格作為支援連結出現在 AI Overviews 或 AI Mode 中,沒有額外的技術要求。指南指出,控制搜尋中爬取的是針對 Googlebot 的 robots.txt 規則,而不是 Google-Extended。
因此,依照 Google 的描述,一個 Googlebot 可以爬取並編入索引、且可以顯示摘錄的頁面,即使 Google-Extended 被禁止,仍可能出現在 AI Overviews 和 AI Mode 中。
有一個細微之處值得明確說明。Google 的 Search Console 說明頁面在介紹其較新的 AI 控制時表示,要限制用於在搜尋的生成式 AI 功能中產生回應的模型的訓練,應使用 Google-Extended。而 Google 關於該 token 的爬蟲文件只提到 Gemini Apps 和 Vertex AI。兩個頁面對範圍的描述不同。兩者都沒有說封鎖該 token 會讓網站退出 AI Overviews。
什麼決定你是否出現在 AI Overviews 與 AI Mode 中?
Google 記載了以下控制,從範圍最窄的到最寬的:
nosnippet:Google 表示,這條規則也會阻止內容被用作 AI Overviews 和 AI Mode 的直接輸入。它同時還會去掉搜尋結果中一般的文字摘錄。max-snippet:長度限制同樣適用於可用作 AI Overviews 和 AI Mode 直接輸入的內容量。data-nosnippet:將頁面中標記的部分排除在摘錄之外。Google 對它的文件沒有特別提到 AI Overviews 或 AI Mode。- Search Console 的 Search generative AI 設定:這是一項全站控制,選項有 Include、Exclude,對於子資源還有 Inherit。被排除的內容不會出現在 AI Overviews、AI Mode 或 Discover 的生成式 AI 功能中,也不會從中獲得流量或曝光。Google 表示該控制自 2026 年 8 月 31 日起已向全球所有網站推出,排除通常在 1 到 2 天內生效,而且它不是對搜尋其餘部分的排名或收錄訊號。
noindex或禁止Googlebot:這些會把頁面從 Google 搜尋中完全移除,也就同時將它從 AI 功能中移除。
Google 還表示,要出現在 AI Overviews 或 AI Mode 中,不需要特殊的 schema.org 標記或其他最佳化。
如果我改為封鎖 Googlebot 會怎樣?
封鎖 Googlebot 是最生硬的做法。Google 表示,針對它設定的爬取偏好會影響 Google 搜尋,包括 Discover 與所有搜尋功能。禁止 Googlebot 的網站會失去一般的搜尋結果,同時也失去在 AI Overviews 和 AI Mode 中的引用。
很少有大型網站這樣做。在我們對最受歡迎的 1,000 個網域所做的 robots.txt 研究中,在有 robots.txt 的 518 個網站裡,有 94 個(18.1%)對 Google-Extended 禁止了首頁,而對 Googlebot 這樣做的只有 14 個(2.7%)。這項研究只涵蓋針對首頁的 robots.txt 規則,也無法顯示這些網站原本期望這條規則發揮什麼作用。
如何檢查 Google 在我的網站上看到了什麼?
如果你的頁面沒有出現在 AI Overviews 或 AI Mode 中,請依排查一般搜尋結果時相同的鏈條逐項檢查:
- 索引:使用 Search Console 中的 URL 檢查工具,確認頁面已被編入索引,而且
Googlebot能夠擷取它。 - 摘錄:檢查頁面的 robots meta 標籤與
X-Robots-Tag標頭中是否有nosnippet、過小的max-snippet值或noindex。 - Search Console 中的 Search generative AI 設定:針對你的網域資源進行檢查,並記住子資源預設會繼承其父資源的設定。
- robots.txt:確保
Googlebot群組(若沒有Googlebot群組,則是*群組)允許該頁面。Google-Extended群組不會改變這一點。 - 防火牆:確保你的 CDN 或機器人防護沒有封鎖或驗證 Google 的爬蟲。在放行 Googlebot 之前,請透過反向 DNS 或 Google 公布的 IP 範圍加以驗證。
- 渲染:Google 會渲染 JavaScript,但初始 HTML 中的文字仍是最穩妥的選擇,也是大多數其他 AI 爬蟲所需要的。
即使所有檢查都通過,Google 仍會為每個查詢決定顯示哪些頁面。有資格出現並不等於一定會被顯示。
在哪裡可以看到 AI Overviews 的流量?
Google 表示,出現在 AI 功能中的網站所產生的流量,包含在 Search Console「成效」報表的整體搜尋流量裡。隨著 2026 年新控制的推出,Google 還宣布了 Search Console 中的生成式 AI 洞察,可顯示曝光次數以及哪些頁面出現在 AI 回應中,並表示後續會增加更多指標。你無法在伺服器日誌中看到 Google-Extended,因為它沒有自己的 user agent。
AISeeWhy 會檢查你的 robots.txt 對 Googlebot 與 Google-Extended 的設定,測試 Google 的爬蟲拿到的頁面是否與瀏覽器相同,並回報可能讓頁面無法出現在 AI Overviews 與 AI Mode 中的 nosnippet 與 noindex 規則。
常見問題
封鎖 Google-Extended 會損害我在 Google 的排名嗎?
Google 表示 Google-Extended 不影響在 Google 搜尋中的收錄,也不作為排名訊號。
如何讓網站退出 AI Overviews,但仍保留在 Google 搜尋中?
Google 在 Search Console 中提供了 Search generative AI 設定,可將網站排除在 AI Overviews、AI Mode 與 Discover 的生成式 AI 功能之外,而不影響搜尋的其餘部分。nosnippet 與 max-snippet 也能限制用作直接輸入,但它們同時會改變一般摘錄。
Search Console 的 AI 設定能阻止 AI 訓練嗎?
不能。Google 的說明頁面表示,該設定不涵蓋訓練,並指向 Google-Extended 來處理訓練。
要出現在 AI Overviews 中,需要特殊標記嗎?
Google 表示沒有額外要求,也不需要特殊的 schema.org 結構化資料。頁面必須已被編入索引,並且有資格顯示摘錄。
Google-Extended 是我可以在防火牆中封鎖的爬蟲嗎?
不是。它沒有自己的 user agent,所以防火牆看不到它。它只能作為 robots.txt token 發揮作用。在防火牆中封鎖 Google 實際的爬蟲會影響搜尋。
資料來源
- Google:常見爬蟲(包含 Google-Extended)
- Google 搜尋中心:AI 功能與你的網站
- Google 搜尋中心:Robots meta 標籤、data-nosnippet 與 X-Robots-Tag
- Google Search Console 說明:搜尋生成式 AI 控制
- Google:為網站擁有者帶來的新機會、新控制與新洞察
- Google:驗證 Google 爬蟲與擷取器
- Google 搜尋中心:JavaScript SEO 基礎
- AISeeWhy:AI 爬蟲存取報告,2026-11