Applebot
Applebot este crawlerul web al Apple. Datele lui alimentează căutarea din Spotlight, Siri și Safari, iar Apple spune că pot fi folosite și la antrenarea modelelor sale de bază. Dacă blochezi Applebot, paginile tale dispar din acele funcții de căutare Apple; pentru a refuza doar antrenarea, interzice în schimb Applebot-Extended.
Ce face
Apple spune că datele parcurse de Applebot alimentează funcții de căutare din tot ecosistemul său, inclusiv Spotlight, Siri și Safari, și că dacă permiți Applebot în robots.txt, conținutul tău poate apărea în rezultatele căutării pentru utilizatorii Apple. Datele pot fi folosite și la antrenarea modelelor de bază Apple și pentru a oferi modelelor AI context actualizat în produsele Apple.
Applebot respectă directivele robots.txt care i se adresează. Dacă robots.txt nu menționează Applebot, dar menționează Googlebot, Apple spune că Applebot urmează regulile Googlebot. Nu urmează Crawl-delay. Folosirea la antrenare este controlată separat prin tokenul Applebot-Extended.
În studiul nostru din 2026-11, 3.9% dintre site-urile populare cu robots.txt îl blocau. →
Tokenul robots.txt
Applebot
Șirul user agent
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot)Cum îl permiți
User-agent: Applebot
Allow: /Cum îl blochezi
User-agent: Applebot
Disallow: /Cum verifici vizitele reale
Apple spune că traficul Applebot poate fi identificat printr-o căutare DNS inversă care returnează un nume de host din domeniul applebot.apple.com; confirmă printr-o căutare directă că numele de host se rezolvă înapoi la același IP. Poți potrivi IP-ul și cu prefixele CIDR pe care Apple le publică în applebot.json.