Google-Extended를 차단하면 AI Overviews와 AI Mode에서 빠질까요?

게시일

핵심 답변

Google 문서에 따르면 그렇지 않습니다. Google-Extended는 Gemini 모델 학습과 Gemini Apps 및 Vertex AI의 그라운딩에서 콘텐츠를 사용하는 것을 제어합니다. AI Overviews와 AI Mode는 Googlebot이 검색용으로 크롤링한 페이지를 사용합니다. 이를 제한하려면 Google은 스니펫 제어, noindex, 사이트를 이 기능에서 제외하는 Search Console 설정을 안내합니다.

Google-Extended는 내 사이트를 Google의 AI에서 빼는 방법으로 흔히 설명되지만, 이는 부분적으로만 맞습니다. 이 간극 때문에 양쪽으로 혼란이 생깁니다. 어떤 사이트는 AI Overviews에서 사라지길 기대하며 차단했다가 아무 변화도 보지 못하고, 어떤 사이트는 검색 트래픽을 잃을까 두려워 아예 피합니다. Google의 문서는 각 제어가 무엇을 하는지 상당히 구체적으로 설명합니다. 이 글에서는 문서가 무엇을 말하는지, 페이지마다 설명이 완전히 일치하지 않는 부분은 어디인지, 내 사이트에서 무엇을 확인해야 하는지를 다룹니다.

이 글의 목차
  1. Google-Extended란 무엇인가요?
  2. Google-Extended를 차단하면 AI Overviews나 AI Mode에 영향이 있나요?
  3. AI Overviews와 AI Mode에 표시될지는 무엇이 좌우하나요?
  4. 대신 Googlebot을 차단하면 어떻게 되나요?
  5. Google이 내 사이트에서 무엇을 보는지 어떻게 확인하나요?
  6. AI Overviews 트래픽은 어디에서 볼 수 있나요?

Google-Extended란 무엇인가요?

Google은 Google-Extended를 게시자가 robots.txt에서 사용할 수 있는 독립형 제품 토큰이라고 설명합니다. 자체 크롤러도 user agent 문자열도 없으며, 페이지는 Google의 기존 크롤러가 가져오고 토큰은 그 콘텐츠를 어떻게 사용할 수 있는지를 제어합니다.

Google의 크롤러 문서에 따르면 두 가지 용도를 다룹니다. Gemini Apps와 Gemini용 Vertex AI API를 구동하는 향후 세대 Gemini 모델의 학습, 그리고 Gemini Apps와 Vertex AI의 Grounding with Google Search에서 프롬프트 시점에 Google 검색 색인의 콘텐츠를 모델에 제공하는 그라운딩입니다. 같은 문서는 Google-Extended가 사이트의 Google 검색 포함 여부에 영향을 주지 않으며 순위 신호로 쓰이지 않는다고 밝힙니다.

User-agent: Google-Extended
Disallow: /

Google-Extended를 차단하면 AI Overviews나 AI Mode에 영향이 있나요?

Google 문서는 AI Overviews나 AI Mode를 Google-Extended가 제어하는 용도로 나열하지 않습니다. Google의 AI 기능 안내에 따르면 페이지가 색인되어 있고 스니펫과 함께 Google 검색에 표시될 자격이 있으면 추가적인 기술 요건 없이 AI Overviews나 AI Mode에 뒷받침 링크로 표시될 자격이 있습니다. 검색에서의 크롤링은 Google-Extended가 아니라 Googlebot에 대한 robots.txt 규칙으로 제어한다고 안내합니다.

따라서 Google의 설명대로라면 Googlebot이 크롤링하고 색인할 수 있으며 스니펫을 표시할 수 있는 페이지는 Google-Extended를 차단해도 AI Overviews와 AI Mode에 나타날 수 있습니다.

분명히 짚어 둘 부분이 하나 있습니다. Google의 새 AI 제어에 관한 Search Console 도움말은 검색의 생성형 AI 기능에서 응답을 만드는 데 쓰이는 모델의 학습을 제한하려면 Google-Extended를 사용하라고 안내합니다. 이 토큰에 대한 Google의 크롤러 문서는 Gemini Apps와 Vertex AI만 언급합니다. 두 문서가 범위를 다르게 설명하고 있습니다. 어느 쪽도 이 토큰을 차단하면 사이트가 AI Overviews에서 제외된다고 말하지는 않습니다.

AI Overviews와 AI Mode에 표시될지는 무엇이 좌우하나요?

Google이 문서화한 제어를 범위가 좁은 것부터 넓은 것 순으로 나열하면 다음과 같습니다.

Google은 또한 AI Overviews나 AI Mode에 나타나기 위해 필요한 특별한 schema.org 마크업이나 다른 최적화는 없다고 밝힙니다.

대신 Googlebot을 차단하면 어떻게 되나요?

Googlebot 차단은 가장 거친 방법입니다. Google은 이에 대한 크롤링 설정이 Discover와 모든 검색 기능을 포함한 Google 검색에 영향을 준다고 밝힙니다. Googlebot을 차단한 사이트는 AI Overviews와 AI Mode의 인용뿐 아니라 일반 검색 결과도 잃습니다.

대형 사이트 가운데 이렇게 하는 곳은 드뭅니다. 가장 인기 있는 1,000개 도메인의 robots.txt를 조사한 결과, robots.txt가 있는 518개 사이트 중 94곳(18.1%)이 Google-Extended에 대해 홈페이지를 차단했지만 Googlebot에 대해서는 14곳(2.7%)에 그쳤습니다. 이 조사는 홈페이지에 대한 robots.txt 규칙만 다루며, 이 사이트들이 규칙에 어떤 효과를 기대했는지는 알 수 없습니다.

Google이 내 사이트에서 무엇을 보는지 어떻게 확인하나요?

내 페이지가 AI Overviews나 AI Mode에 없다면 일반 검색 결과와 같은 순서로 점검하세요.

모든 점검을 통과하더라도 질의마다 어떤 페이지를 보여 줄지는 Google이 정합니다. 표시될 자격이 있다는 것과 실제로 표시되는 것은 같지 않습니다.

AI Overviews 트래픽은 어디에서 볼 수 있나요?

Google은 AI 기능에 사이트가 나타나서 생기는 트래픽이 Search Console 실적 보고서의 전체 검색 트래픽에 포함된다고 밝힙니다. 2026년 제어 기능과 함께 Google은 노출 수와 AI 응답에 나타나는 페이지를 보여 주는 Search Console의 생성형 AI 인사이트도 발표했으며, 지표가 더 추가될 것이라고 밝혔습니다. Google-Extended는 자체 user agent가 없으므로 서버 로그에서 볼 수 없습니다.

AISeeWhy는 Googlebot과 Google-Extended 양쪽에 대한 robots.txt를 확인하고, Google 크롤러가 브라우저와 같은 페이지를 받는지 테스트하며, 페이지를 AI Overviews와 AI Mode에서 빠지게 할 수 있는 nosnippet과 noindex 규칙을 알려 줍니다.

자주 묻는 질문

Google-Extended를 차단하면 Google 검색 순위가 떨어지나요?

Google은 Google-Extended가 Google 검색 포함 여부에 영향을 주지 않으며 순위 신호로 쓰이지 않는다고 밝힙니다.

Google 검색에는 남고 AI Overviews에서는 빠지려면 어떻게 하나요?

Google은 나머지 검색에 영향을 주지 않고 사이트를 AI Overviews, AI Mode, Discover의 생성형 AI 기능에서 제외하는 Search Console의 Search generative AI 설정을 제공합니다. nosnippet과 max-snippet도 직접 입력으로의 사용을 제한하지만 일반 스니펫도 바뀝니다.

Search Console의 AI 설정이 AI 학습을 막아 주나요?

아닙니다. Google의 도움말은 이 설정이 학습을 다루지 않는다고 밝히며 학습에는 Google-Extended를 안내합니다.

AI Overviews에 나타나려면 특별한 마크업이 필요한가요?

Google은 추가 요건이나 특별한 schema.org 구조화 데이터가 필요하지 않다고 밝힙니다. 페이지가 색인되어 있고 스니펫을 표시할 수 있어야 합니다.

Google-Extended는 방화벽에서 차단할 수 있는 크롤러인가요?

아닙니다. 자체 user agent가 없어서 방화벽에서는 보이지 않으며 robots.txt 토큰으로만 작동합니다. 방화벽에서 Google의 실제 크롤러를 차단하면 검색에 영향을 줍니다.

참고 자료

다른 글