Applebot
Applebot Apple को वेब क्रलर हो। यसको डेटाले Spotlight, Siri र Safari मा सर्च चलाउँछ, र Apple भन्छ यो Apple का foundation मोडलको ट्रेनिङमा पनि प्रयोग हुन सक्छ। Applebot ब्लक गर्दा तपाईंका पेज ती Apple सर्च सुविधाबाट हट्छन्; ट्रेनिङबाट मात्र बाहिरिन यसको सट्टा Applebot-Extended निषेध गर्नुहोस्।
यसलाई कसरी अनुमति दिने
User-agent: Applebot
Allow: / यसलाई कसरी ब्लक गर्ने
User-agent: Applebot
Disallow: / यसले के गर्छ
Apple भन्छ, Applebot ले क्रल गरेको डेटाले Spotlight, Siri र Safari सहित यसको इकोसिस्टमभरका सर्च सुविधा चलाउँछ, र robots.txt मा Applebot लाई अनुमति दिँदा तपाईंको सामग्री Apple प्रयोगकर्ताका सर्च नतिजामा देखिन सक्छ। डेटा Apple foundation मोडलको ट्रेनिङ र Apple उत्पादनमा AI मोडललाई अद्यावधिक सन्दर्भ दिन पनि प्रयोग हुन सक्छ।
Applebot ले आफूलाई लक्षित गरिएका robots.txt निर्देशन सम्मान गर्छ। तपाईंको robots.txt मा Applebot को उल्लेख छैन तर Googlebot को छ भने Apple भन्छ Applebot ले Googlebot का नियम पालना गर्छ। यसले Crawl-delay पालना गर्दैन। ट्रेनिङमा प्रयोग Applebot-Extended टोकनले छुट्टै नियन्त्रण गरिन्छ।
हाम्रो 2026-11 को अध्ययनमा robots.txt भएका लोकप्रिय साइटमध्ये 3.9% ले यसलाई ब्लक गरेका थिए। →
robots.txt टोकन
Applebot
User-agent string
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/17.4 Safari/605.1.15 (Applebot/0.1; +http://www.apple.com/go/applebot) वास्तविक भ्रमण कसरी प्रमाणित गर्ने
Apple भन्छ, applebot.apple.com डोमेनको hostname फर्काउने reverse DNS lookup बाट Applebot को ट्राफिक चिन्न सकिन्छ; forward lookup बाट hostname उही IP मा फर्किन्छ भनी पक्का गर्नुहोस्। तपाईं IP लाई Apple ले applebot.json मा प्रकाशित गर्ने CIDR prefix सँग पनि मिलाउन सक्नुहुन्छ।
तपाईंको साइटले यसलाई भित्र आउन दिन्छ कि जाँच्नुहोस् →
AI क्रलरका लागि robots.txt: केलाई अनुमति दिने, के ब्लक गर्ने →