Applebot-Extended
Applebot-Extended è un token robots.txt, non un crawler. Vietarlo indica ad Apple di non usare i contenuti scansionati da Applebot per addestrare i suoi modelli di base generativi. Apple afferma che le pagine che lo vietano possono comunque comparire nei risultati di ricerca di Apple, quindi bloccarlo non influisce sulla visibilità in Siri o Spotlight.
Cosa fa
Apple afferma che Applebot-Extended non scansiona le pagine web. Serve solo a stabilire come possono essere usati i dati scansionati da Applebot. Vietarlo esclude i tuoi contenuti dall'addestramento dei modelli di base di Apple che alimentano funzioni di AI generativa come Apple Intelligence.
Le pagine che vietano Applebot-Extended possono comunque essere incluse nei risultati di ricerca, e Apple afferma che la regola non viene considerata nel posizionamento nella ricerca. La scansione in sé è controllata dal token Applebot.
Nel nostro studio di 2026-11, 18.0% dei siti popolari con un robots.txt lo bloccava. →
Token robots.txt
Applebot-Extended
Come consentirlo
User-agent: Applebot-Extended
Allow: /Come bloccarlo
User-agent: Applebot-Extended
Disallow: /Come verificare le visite reali
Nei tuoi log non c'è nulla da verificare: Applebot-Extended non compare mai come user agent. Le richieste sottostanti provengono da Applebot, che puoi verificare con il DNS inverso (applebot.apple.com) o confrontandolo con gli intervalli IP pubblicati da Apple.
Controlla se il tuo sito lo lascia entrare →
robots.txt per i crawler di IA: cosa consentire, cosa bloccare →