Applebot-Extended
Applebot-Extended is een robots.txt-token, geen crawler. Als je het verbiedt, geef je Apple aan dat door Applebot gecrawlde content niet mag worden gebruikt om de generatieve basismodellen te trainen. Apple zegt dat pagina's die het verbieden nog steeds in de zoekresultaten van Apple kunnen verschijnen, dus blokkeren raakt je zichtbaarheid in Siri of Spotlight niet.
Wat de crawler doet
Apple zegt dat Applebot-Extended geen webpagina's crawlt. Het wordt alleen gebruikt om te bepalen hoe door Applebot gecrawlde data mag worden gebruikt. Als je het verbiedt, sluit je je content uit van de training van de basismodellen van Apple die generatieve AI-functies zoals Apple Intelligence aandrijven.
Pagina's die Applebot-Extended verbieden, kunnen nog steeds in zoekresultaten worden opgenomen, en Apple zegt dat de regel niet meeweegt in de zoekrangschikking. Het crawlen zelf wordt geregeld door het Applebot-token.
In ons onderzoek van 2026-11 blokkeerde 18.0% van de populaire sites met een robots.txt deze crawler. →
robots.txt-token
Applebot-Extended
Zo sta je hem toe
User-agent: Applebot-Extended
Allow: /Zo blokkeer je hem
User-agent: Applebot-Extended
Disallow: /Zo verifieer je echte bezoeken
Er is niets te verifiëren in je logs: Applebot-Extended verschijnt nooit als user agent. De onderliggende verzoeken komen van Applebot, die je kunt verifiëren met reverse DNS (applebot.apple.com) of aan de hand van de gepubliceerde IP-bereiken van Apple.
Controleer of je site hem toelaat →
robots.txt voor AI-crawlers: wat je toestaat en wat je blokkeert →