Applebot
Applebot، Apple کا ویب کرالر ہے۔ اس کا ڈیٹا Spotlight، Siri اور Safari میں سرچ چلاتا ہے، اور Apple کہتا ہے کہ یہ Apple کے بنیادی ماڈلز کی ٹریننگ کے لیے بھی استعمال ہو سکتا ہے۔ Applebot کو بلاک کرنے سے آپ کے صفحات Apple کے ان سرچ فیچرز سے نکل جاتے ہیں؛ صرف ٹریننگ سے انکار کے لیے اس کی بجائے Applebot-Extended کو ممنوع کریں۔
اسے اجازت کیسے دیں
User-agent: Applebot
Allow: / اسے بلاک کیسے کریں
User-agent: Applebot
Disallow: / یہ کیا کرتا ہے
Apple کہتا ہے کہ Applebot کا کرال کیا گیا ڈیٹا اس کے پورے ecosystem میں سرچ فیچرز چلاتا ہے، بشمول Spotlight، Siri اور Safari، اور robots.txt میں Applebot کو اجازت دینے سے آپ کا مواد Apple صارفین کے سرچ نتائج میں ظاہر ہو سکتا ہے۔ یہ ڈیٹا Apple کے بنیادی ماڈلز کی ٹریننگ اور Apple پروڈکٹس میں AI ماڈلز کو تازہ سیاق و سباق دینے کے لیے بھی استعمال ہو سکتا ہے۔
Applebot اپنے لیے لکھی گئی robots.txt ہدایات کا احترام کرتا ہے۔ اگر آپ کے robots.txt میں Applebot کا ذکر نہیں لیکن Googlebot کا ہے تو Apple کے مطابق Applebot، Googlebot کے اصولوں کی پیروی کرتا ہے۔ یہ Crawl-delay کی پیروی نہیں کرتا۔ ٹریننگ میں استعمال Applebot-Extended ٹوکن سے الگ کنٹرول ہوتا ہے۔
ہماری 2026-11 کی تحقیق میں robots.txt والی مقبول سائٹس میں سے 3.9% نے اسے بلاک کیا۔ ←
robots.txt ٹوکن
Applebot
یوزر ایجنٹ string
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot) حقیقی وزٹس کی تصدیق کیسے کریں
Apple کہتا ہے کہ Applebot کے ٹریفک کی شناخت ایسے reverse DNS lookup سے ہو سکتی ہے جو applebot.apple.com ڈومین میں ہوسٹ نام لوٹائے؛ forward lookup سے تصدیق کریں کہ ہوسٹ نام واپس اسی IP پر جاتا ہے۔ آپ IP کا ان CIDR prefixes سے بھی موازنہ کر سکتے ہیں جو Apple، applebot.json میں شائع کرتا ہے۔