Applebot-Extended
Applebot-Extended एक robots.txt टोकन है, क्रॉलर नहीं। इसे डिसअलाउ करने से Apple को संकेत मिलता है कि Applebot द्वारा क्रॉल किया गया कंटेंट उसके जनरेटिव फ़ाउंडेशन मॉडलों की ट्रेनिंग के लिए इस्तेमाल न हो। Apple के अनुसार इसे डिसअलाउ करने वाले पेज Apple के सर्च नतीजों में फिर भी आ सकते हैं, इसलिए इसे ब्लॉक करने से Siri या Spotlight में दृश्यता प्रभावित नहीं होती।
यह क्या करता है
Apple के अनुसार Applebot-Extended वेबपेज क्रॉल नहीं करता। इसका उपयोग केवल यह तय करने में होता है कि Applebot द्वारा क्रॉल किए गए डेटा का उपयोग कैसे हो सकता है। इसे डिसअलाउ करने से आपका कंटेंट Apple के उन फ़ाउंडेशन मॉडलों की ट्रेनिंग से बाहर हो जाता है जो Apple Intelligence जैसी जनरेटिव AI सुविधाओं को चलाते हैं।
Applebot-Extended को डिसअलाउ करने वाले पेज सर्च नतीजों में फिर भी शामिल हो सकते हैं, और Apple के अनुसार इस नियम को सर्च रैंकिंग में नहीं गिना जाता। क्रॉलिंग को खुद Applebot टोकन नियंत्रित करता है।
हमारे 2026-11 के अध्ययन में robots.txt वाली लोकप्रिय साइटों में से 18.0% ने इसे ब्लॉक किया था। →
robots.txt टोकन
Applebot-Extended
इसे अनुमति कैसे दें
User-agent: Applebot-Extended
Allow: /इसे ब्लॉक कैसे करें
User-agent: Applebot-Extended
Disallow: /असली विज़िट कैसे सत्यापित करें
आपके लॉग में सत्यापित करने के लिए कुछ नहीं है: Applebot-Extended कभी user agent के रूप में नहीं दिखता। इसके पीछे के अनुरोध Applebot से आते हैं, जिसे आप रिवर्स DNS (applebot.apple.com) से या Apple की प्रकाशित IP रेंज से मिलाकर सत्यापित कर सकते हैं।