Applebot
Applebot は Apple のウェブクローラーです。そのデータは Spotlight、Siri、Safari の検索を支えており、Apple によると、Apple の基盤モデルの学習にも使われる場合があります。Applebot をブロックすると、これらの Apple の検索機能からページが外れます。学習だけをオプトアウトしたい場合は、代わりに Applebot-Extended を禁止してください。
役割
Apple によると、Applebot がクロールしたデータは Spotlight、Siri、Safari など同社のエコシステム全体の検索機能を支えており、robots.txt で Applebot を許可すると、Apple のユーザー向けの検索結果にコンテンツが表示されるようになります。このデータは、Apple の基盤モデルの学習や、Apple 製品内で AI モデルに最新のコンテキストを与えるためにも使われる場合があります。
Applebot は、自身に向けられた robots.txt のディレクティブを尊重します。robots.txt で Applebot に言及せず Googlebot に言及している場合、Apple によると、Applebot は Googlebot のルールに従います。Crawl-delay には従いません。学習への利用は、Applebot-Extended トークンで別に制御されます。
2026-11の調査では、robots.txt を設置している人気サイトの 3.9% がこのクローラーをブロックしていました。 →
robots.txt のトークン
Applebot
ユーザーエージェント文字列
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot)許可する方法
User-agent: Applebot
Allow: /ブロックする方法
User-agent: Applebot
Disallow: /本物のアクセスかどうかを確認する方法
Apple によると、Applebot のトラフィックは、逆引き DNS で applebot.apple.com ドメインのホスト名が返ることで識別できます。続けて正引きを行い、そのホスト名が同じ IP に解決されることを確認してください。Apple が applebot.json で公開している CIDR プレフィックスと IP を照合することもできます。