Applebot
Applebot is de webcrawler van Apple. De data voedt zoeken in Spotlight, Siri en Safari, en Apple zegt dat ze ook kan worden gebruikt om de basismodellen van Apple te trainen. Applebot blokkeren haalt je pagina's uit die zoekfuncties van Apple; wil je alleen training uitsluiten, verbied dan Applebot-Extended.
Wat de crawler doet
Apple zegt dat data die Applebot crawlt zoekfuncties in het hele ecosysteem voedt, waaronder Spotlight, Siri en Safari, en dat je content in zoekresultaten voor Apple-gebruikers kan verschijnen als je Applebot in robots.txt toestaat. De data kan ook worden gebruikt om basismodellen van Apple te trainen en AI-modellen actuele context te geven in Apple-producten.
Applebot respecteert robots.txt-richtlijnen die op hem zijn gericht. Als je robots.txt Applebot niet noemt maar wel Googlebot, volgt Applebot volgens Apple de Googlebot-regels. Hij volgt Crawl-delay niet. Gebruik voor training wordt apart geregeld met het Applebot-Extended-token.
In ons onderzoek van 2026-11 blokkeerde 3.9% van de populaire sites met een robots.txt deze crawler. →
robots.txt-token
Applebot
User-agentstring
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot)
Zo sta je hem toe
User-agent: Applebot
Allow: /
Zo blokkeer je hem
User-agent: Applebot
Disallow: /
Zo verifieer je echte bezoeken
Apple zegt dat Applebot-verkeer te herkennen is aan een reverse DNS-lookup die een hostnaam in het domein applebot.apple.com teruggeeft; controleer met een forward lookup dat de hostnaam weer naar hetzelfde IP wijst. Je kunt het IP ook vergelijken met de CIDR-prefixen die Apple publiceert in applebot.json.
Controleer of je site hem toelaat →
robots.txt voor AI-crawlers: wat je toestaat en wat je blokkeert →