Claude-User

Anthropic · प्रयोगकर्ताले अनुरोध गरेको फेच

Claude प्रयोगकर्ताले आवश्यक पर्ने प्रश्न सोध्दा, जस्तै साझा गरिएको लिंक पढ्न, Claude-User ले वेबसाइटमा भ्रमण गर्छ। Anthropic भन्छ, यसका बटले robots.txt पालना गर्छन्, र Claude-User ब्लक गर्दा प्रयोगकर्ताका प्रश्नको जवाफमा तपाईंको सामग्री ल्याउन सकिँदैन, जसले प्रयोगकर्ताले चलाउने वेब सर्चमा तपाईंको देखिने क्षमता घटाउन सक्छ।

यसलाई कसरी अनुमति दिने

User-agent: Claude-User
Allow: /

यसलाई कसरी ब्लक गर्ने

User-agent: Claude-User
Disallow: /

यसले के गर्छ

Anthropic ले Claude प्रयोगकर्तालाई सघाउन Claude-User प्रयोग गर्छ: कसैले Claude लाई प्रश्न सोध्दा उत्तर दिन यसले वेबसाइटमा पहुँच गर्न सक्छ। यी सामान्य क्रल होइनन्, प्रयोगकर्ताका तर्फबाट गरिने छुट्टाछुट्टै फेच हुन्।

प्रयोगकर्ताले अनुरोध गरेका फेचरले robots.txt पालना नगर्न सक्ने बताउने OpenAI र Perplexity भन्दा फरक, Anthropic भन्छ यसका बटले robots.txt का निर्देशन पालना गर्छन् र त्यहाँ Claude-User ब्लक गर्ने तरिका बताउँछ। यसो गर्दा प्रयोगकर्ताले तपाईंका पेजबारे सोध्दा Claude ले ती ल्याउन सक्दैन।

हाम्रो 2026-11 को अध्ययनमा robots.txt भएका लोकप्रिय साइटमध्ये 13.1% ले यसलाई ब्लक गरेका थिए। →

robots.txt टोकन

Claude-User

वास्तविक भ्रमण कसरी प्रमाणित गर्ने

Anthropic ले आफ्ना क्रलरका IP ठेगाना claude.com/crawling/bots.json मा प्रकाशित गर्छ र त्यो सूचीमा IP भएको क्रलर Anthropic बाट आएको भन्छ। user agent मा भर पर्नुको सट्टा स्रोत IP लाई सूचीसँग मिलाउनुहोस्। Anthropic ले बाहिरिन IP ब्लक प्रयोग नगर्न सल्लाह दिन्छ, किनभने यसले क्रलरलाई robots.txt पढ्नबाट पनि रोक्छ।

तपाईंको साइटले यसलाई भित्र आउन दिन्छ कि जाँच्नुहोस् →

Anthropic का क्रलर: ClaudeBot, Claude-SearchBot र Claude-User →