Applebot-Extended

Apple · AI 학습

Applebot-Extended는 크롤러가 아니라 robots.txt 토큰입니다. 허용하지 않으면 Applebot이 크롤링한 콘텐츠를 생성형 기반 모델 학습에 쓰지 말라고 Apple에 알리는 것입니다. Apple은 이를 허용하지 않은 페이지도 Apple 검색 결과에 나타날 수 있다고 밝히므로, 차단해도 Siri나 Spotlight 가시성에는 영향이 없습니다.

하는 일

Apple은 Applebot-Extended가 웹 페이지를 크롤링하지 않는다고 밝힙니다. Applebot이 크롤링한 데이터를 어떻게 쓸 수 있는지 판단하는 데만 쓰입니다. 허용하지 않으면 Apple Intelligence 같은 생성형 AI 기능을 구동하는 Apple 기반 모델의 학습에서 내 콘텐츠가 옵트아웃됩니다.

Applebot-Extended를 허용하지 않은 페이지도 검색 결과에 포함될 수 있으며, Apple은 이 규칙이 검색 순위에 고려되지 않는다고 밝힙니다. 크롤링 자체는 Applebot 토큰으로 제어됩니다.

2026-11 조사에서 robots.txt가 있는 인기 사이트의 18.0%가 이 크롤러를 차단했습니다. →

robots.txt 토큰

Applebot-Extended

허용하는 방법

User-agent: Applebot-Extended
Allow: /

차단하는 방법

User-agent: Applebot-Extended
Disallow: /

실제 방문인지 확인하는 방법

로그에서 확인할 것은 없습니다. Applebot-Extended는 사용자 에이전트로 나타나지 않습니다. 그 뒤의 요청은 Applebot에서 오며, 역방향 DNS(applebot.apple.com)로, 또는 Apple이 공개한 IP 대역과 대조해 확인할 수 있습니다.

내 사이트가 허용하는지 점검하기 →

AI 크롤러용 robots.txt: 무엇을 허용하고 무엇을 차단할까 →