Applebot
Applebot은 Apple의 웹 크롤러입니다. 이 데이터는 Spotlight, Siri, Safari의 검색을 구동하며, Apple은 Apple 기반 모델 학습에도 쓰일 수 있다고 밝힙니다. Applebot을 차단하면 내 페이지가 이런 Apple 검색 기능에서 사라집니다. 학습만 옵트아웃하려면 대신 Applebot-Extended를 허용하지 않으세요.
하는 일
Apple은 Applebot이 크롤링한 데이터가 Spotlight, Siri, Safari를 비롯한 자사 생태계 전반의 검색 기능을 구동하며, robots.txt에서 Applebot을 허용하면 Apple 사용자의 검색 결과에 내 콘텐츠가 나타날 수 있다고 밝힙니다. 이 데이터는 Apple 기반 모델 학습과 Apple 제품에서 AI 모델에 최신 맥락을 제공하는 데도 쓰일 수 있습니다.
Applebot은 자신을 대상으로 한 robots.txt 지시문을 존중합니다. robots.txt에 Applebot은 없고 Googlebot만 있으면 Applebot은 Googlebot 규칙을 따른다고 Apple은 밝힙니다. Crawl-delay는 따르지 않습니다. 학습 사용은 Applebot-Extended 토큰으로 별도로 제어됩니다.
2026-11 조사에서 robots.txt가 있는 인기 사이트의 3.9%가 이 크롤러를 차단했습니다. →
robots.txt 토큰
Applebot
사용자 에이전트 문자열
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot)허용하는 방법
User-agent: Applebot
Allow: /차단하는 방법
User-agent: Applebot
Disallow: /실제 방문인지 확인하는 방법
Apple에 따르면 Applebot 트래픽은 역방향 DNS 조회로 applebot.apple.com 도메인의 호스트 이름이 반환되는지 보고 식별할 수 있습니다. 정방향 조회로 그 호스트 이름이 같은 IP로 확인되는지 검증하세요. Apple이 applebot.json에 공개한 CIDR 접두사와 IP를 대조할 수도 있습니다.