封鎖 Google-Extended 會讓你退出 AI Overviews 與 AI Mode 嗎?

發布於

簡短回答

依據 Google 的文件,不會。Google-Extended 控制你的內容是否用於 Gemini 模型訓練,以及用於 Gemini Apps 和 Vertex AI 中的 grounding。AI Overviews 與 AI Mode 使用 Googlebot 為搜尋爬取的頁面。要限制它們,Google 指向摘錄控制、noindex,以及 Search Console 中將網站排除在這些功能之外的設定。

Google-Extended 常被描述為讓網站遠離 Google AI 的方法。這只說對了一部分,而這個落差在兩個方向上都造成了困惑:有些網站封鎖它是想從 AI Overviews 中消失,結果毫無變化;另一些網站則因擔心損失搜尋流量而避開它。Google 自己的文件對每項控制的作用說得相當具體。以下是文件中的說法、各頁面不完全一致之處,以及你應該在自己的網站上檢查什麼。

本頁內容
  1. 什麼是 Google-Extended?
  2. 封鎖 Google-Extended 會影響 AI Overviews 或 AI Mode 嗎?
  3. 什麼決定你是否出現在 AI Overviews 與 AI Mode 中?
  4. 如果我改為封鎖 Googlebot 會怎樣?
  5. 如何檢查 Google 在我的網站上看到了什麼?
  6. 在哪裡可以看到 AI Overviews 的流量?

什麼是 Google-Extended?

Google 將 Google-Extended 描述為發布者可以在 robots.txt 中使用的獨立產品 token。它沒有自己的爬蟲,也沒有自己的 user agent 字串;頁面由 Google 現有的爬蟲擷取,而這個 token 控制該內容可以如何使用。

依據 Google 的爬蟲文件,它涵蓋兩種用途:訓練為 Gemini Apps 與 Gemini 的 Vertex AI API 提供支援的未來幾代 Gemini 模型;以及 grounding,也就是在提示當下把來自 Google 搜尋索引的內容提供給模型,用於 Gemini Apps 和 Vertex AI 上的 Grounding with Google Search。同一頁面還表示,Google-Extended 不影響網站在 Google 搜尋中的收錄,也不作為排名訊號。

User-agent: Google-Extended
Disallow: /

封鎖 Google-Extended 會影響 AI Overviews 或 AI Mode 嗎?

Google 的文件沒有把 AI Overviews 或 AI Mode 列在 Google-Extended 所控制的用途中。Google 的 AI 功能指南表示,只要頁面已被編入索引,並且有資格在 Google 搜尋中以摘錄形式顯示,就有資格作為支援連結出現在 AI Overviews 或 AI Mode 中,沒有額外的技術要求。指南指出,控制搜尋中爬取的是針對 Googlebot 的 robots.txt 規則,而不是 Google-Extended。

因此,依照 Google 的描述,一個 Googlebot 可以爬取並編入索引、且可以顯示摘錄的頁面,即使 Google-Extended 被禁止,仍可能出現在 AI Overviews 和 AI Mode 中。

有一個細微之處值得明確說明。Google 的 Search Console 說明頁面在介紹其較新的 AI 控制時表示,要限制用於在搜尋的生成式 AI 功能中產生回應的模型的訓練,應使用 Google-Extended。而 Google 關於該 token 的爬蟲文件只提到 Gemini Apps 和 Vertex AI。兩個頁面對範圍的描述不同。兩者都沒有說封鎖該 token 會讓網站退出 AI Overviews。

什麼決定你是否出現在 AI Overviews 與 AI Mode 中?

Google 記載了以下控制,從範圍最窄的到最寬的:

Google 還表示,要出現在 AI Overviews 或 AI Mode 中,不需要特殊的 schema.org 標記或其他最佳化。

如果我改為封鎖 Googlebot 會怎樣?

封鎖 Googlebot 是最生硬的做法。Google 表示,針對它設定的爬取偏好會影響 Google 搜尋,包括 Discover 與所有搜尋功能。禁止 Googlebot 的網站會失去一般的搜尋結果,同時也失去在 AI Overviews 和 AI Mode 中的引用。

很少有大型網站這樣做。在我們對最受歡迎的 1,000 個網域所做的 robots.txt 研究中,在有 robots.txt 的 518 個網站裡,有 94 個(18.1%)對 Google-Extended 禁止了首頁,而對 Googlebot 這樣做的只有 14 個(2.7%)。這項研究只涵蓋針對首頁的 robots.txt 規則,也無法顯示這些網站原本期望這條規則發揮什麼作用。

如何檢查 Google 在我的網站上看到了什麼?

如果你的頁面沒有出現在 AI Overviews 或 AI Mode 中,請依排查一般搜尋結果時相同的鏈條逐項檢查:

即使所有檢查都通過,Google 仍會為每個查詢決定顯示哪些頁面。有資格出現並不等於一定會被顯示。

在哪裡可以看到 AI Overviews 的流量?

Google 表示,出現在 AI 功能中的網站所產生的流量,包含在 Search Console「成效」報表的整體搜尋流量裡。隨著 2026 年新控制的推出,Google 還宣布了 Search Console 中的生成式 AI 洞察,可顯示曝光次數以及哪些頁面出現在 AI 回應中,並表示後續會增加更多指標。你無法在伺服器日誌中看到 Google-Extended,因為它沒有自己的 user agent。

AISeeWhy 會檢查你的 robots.txt 對 Googlebot 與 Google-Extended 的設定,測試 Google 的爬蟲拿到的頁面是否與瀏覽器相同,並回報可能讓頁面無法出現在 AI Overviews 與 AI Mode 中的 nosnippet 與 noindex 規則。

常見問題

封鎖 Google-Extended 會損害我在 Google 的排名嗎?

Google 表示 Google-Extended 不影響在 Google 搜尋中的收錄,也不作為排名訊號。

如何讓網站退出 AI Overviews,但仍保留在 Google 搜尋中?

Google 在 Search Console 中提供了 Search generative AI 設定,可將網站排除在 AI Overviews、AI Mode 與 Discover 的生成式 AI 功能之外,而不影響搜尋的其餘部分。nosnippet 與 max-snippet 也能限制用作直接輸入,但它們同時會改變一般摘錄。

Search Console 的 AI 設定能阻止 AI 訓練嗎?

不能。Google 的說明頁面表示,該設定不涵蓋訓練,並指向 Google-Extended 來處理訓練。

要出現在 AI Overviews 中,需要特殊標記嗎?

Google 表示沒有額外要求,也不需要特殊的 schema.org 結構化資料。頁面必須已被編入索引,並且有資格顯示摘錄。

Google-Extended 是我可以在防火牆中封鎖的爬蟲嗎?

不是。它沒有自己的 user agent,所以防火牆看不到它。它只能作為 robots.txt token 發揮作用。在防火牆中封鎖 Google 實際的爬蟲會影響搜尋。

資料來源

更多文章