Claude-User

Anthropic · उपयोगकर्ता के अनुरोध पर फ़ेच

Claude-User किसी वेबसाइट पर तब जाता है जब Claude के उपयोगकर्ता का कोई सवाल इसकी माँग करता है, जैसे साझा किया गया लिंक पढ़ना। Anthropic के अनुसार उसके बॉट robots.txt का सम्मान करते हैं, और Claude-User को ब्लॉक करने से उपयोगकर्ताओं के प्रश्नों के जवाब में आपका कंटेंट नहीं लाया जा सकता, जिससे उपयोगकर्ता-निर्देशित वेब सर्च में आपकी दृश्यता घट सकती है।

यह क्या करता है

Anthropic, Claude-User का उपयोग Claude के उपयोगकर्ताओं की मदद के लिए करती है: जब कोई Claude से सवाल पूछता है, तो वह जवाब देने के लिए किसी वेबसाइट तक पहुँच सकता है। ये उपयोगकर्ता की ओर से किए गए अलग-अलग फ़ेच हैं, सामान्य क्रॉल नहीं।

OpenAI और Perplexity के विपरीत, जिनके अनुसार उनके उपयोगकर्ता-अनुरोधित फ़ेचर robots.txt का पालन नहीं भी कर सकते, Anthropic कहती है कि उसके बॉट robots.txt निर्देशों का सम्मान करते हैं, और वहीं Claude-User को ब्लॉक करने का तरीका बताती है। ऐसा करने पर जब उपयोगकर्ता आपके पेजों के बारे में पूछते हैं, तब Claude उन्हें नहीं ला पाता।

हमारे 2026-11 के अध्ययन में robots.txt वाली लोकप्रिय साइटों में से 13.1% ने इसे ब्लॉक किया था। →

robots.txt टोकन

Claude-User

इसे अनुमति कैसे दें

User-agent: Claude-User
Allow: /

इसे ब्लॉक कैसे करें

User-agent: Claude-User
Disallow: /

असली विज़िट कैसे सत्यापित करें

Anthropic अपने क्रॉलरों के IP पते claude.com/crawling/bots.json पर प्रकाशित करती है और बताती है कि जिस क्रॉलर का IP इस सूची में है, वह Anthropic का है। user agent पर भरोसा करने के बजाय स्रोत IP की तुलना सूची से करें। Anthropic ऑप्ट-आउट के लिए IP ब्लॉकिंग का उपयोग न करने की सलाह देती है, क्योंकि इससे क्रॉलर robots.txt भी नहीं पढ़ पाता।

जाँचें कि आपकी साइट इसे अंदर आने देती है या नहीं →

Anthropic के क्रॉलर: ClaudeBot, Claude-SearchBot और Claude-User →