Applebot-Extended
O Applebot-Extended é um token do robots.txt, não um crawler. Proibi-lo avisa à Apple que ela não deve usar conteúdo rastreado pelo Applebot para treinar seus modelos de base generativos. A Apple diz que páginas que o proíbem ainda podem aparecer nos resultados de busca da Apple, então bloqueá-lo não afeta a visibilidade na Siri nem no Spotlight.
O que ele faz
A Apple diz que o Applebot-Extended não rastreia páginas da web. Ele serve apenas para determinar como os dados rastreados pelo Applebot podem ser usados. Proibi-lo tira seu conteúdo do treinamento dos modelos de base da Apple que alimentam recursos de IA generativa, como o Apple Intelligence.
Páginas que proíbem o Applebot-Extended ainda podem ser incluídas nos resultados de busca, e a Apple diz que a regra não é considerada na classificação da busca. O rastreamento em si é controlado pelo token Applebot.
No nosso estudo de 2026-11, 18.0% dos sites populares com robots.txt o bloqueavam. →
Token do robots.txt
Applebot-Extended
Como permitir
User-agent: Applebot-Extended
Allow: /
Como bloquear
User-agent: Applebot-Extended
Disallow: /
Como verificar visitas reais
Não há nada para verificar nos seus logs: o Applebot-Extended nunca aparece como user agent. As requisições por trás dele vêm do Applebot, que você pode verificar por DNS reverso (applebot.apple.com) ou comparando com as faixas de IP publicadas pela Apple.
Veja se seu site deixa ele entrar →
robots.txt para crawlers de IA: o que liberar e o que bloquear →