Claude-User

Anthropic · युजरच्या विनंतीवरून फेच

Claude वापरकर्ता ज्यासाठी वेबसाइटची गरज आहे असा प्रश्न विचारतो, जसे की शेअर केलेली लिंक वाचणे, तेव्हा Claude-User त्या वेबसाइटला भेट देतो. Anthropic सांगते की त्याचे बॉट robots.txt पाळतात, आणि Claude-User ला ब्लॉक केल्याने वापरकर्त्यांच्या प्रश्नांना उत्तर देताना तुमचा मजकूर मिळवला जात नाही, ज्यामुळे वापरकर्त्याने चालवलेल्या वेब सर्चमध्ये तुमची दृश्यमानता कमी होऊ शकते.

त्याला परवानगी कशी द्यावी

User-agent: Claude-User
Allow: /

त्याला ब्लॉक कसे करावे

User-agent: Claude-User
Disallow: /

तो काय करतो

Anthropic Claude वापरकर्त्यांच्या मदतीसाठी Claude-User वापरते: कोणी Claude ला प्रश्न विचारल्यावर, त्याचे उत्तर देण्यासाठी तो वेबसाइट ॲक्सेस करू शकतो. हे वापरकर्त्याच्या वतीने केलेले वैयक्तिक फेच आहेत, सर्वसाधारण क्रॉल नाही.

वापरकर्त्याच्या विनंतीवरून फेच करणारे त्यांचे बॉट robots.txt पाळू शकत नाहीत असे सांगणाऱ्या OpenAI आणि Perplexity च्या उलट, Anthropic सांगते की त्याचे बॉट robots.txt directives पाळतात आणि तिथे Claude-User ला ब्लॉक करण्याचे वर्णन करते. असे केल्याने वापरकर्ते तुमच्या पेजेसबद्दल विचारतात तेव्हा Claude ती मिळवू शकत नाही.

आमच्या 2026-11 च्या अभ्यासात, robots.txt असलेल्या लोकप्रिय साइटपैकी 13.1% साइटनी त्याला ब्लॉक केले. →

robots.txt टोकन

Claude-User

खऱ्या भेटींची पडताळणी कशी करावी

Anthropic आपल्या क्रॉलरचे IP पत्ते claude.com/crawling/bots.json वर प्रकाशित करते आणि सांगते की ज्या क्रॉलरचा IP त्या यादीत आहे तो Anthropic कडून येतो. युजर एजंटवर विश्वास ठेवण्याऐवजी स्रोत IP यादीशी जुळवा. Anthropic opt out करण्यासाठी IP ब्लॉकिंग न वापरण्याचा सल्ला देते, कारण त्यामुळे क्रॉलर robots.txt सुद्धा वाचू शकत नाही.

तुमची साइट त्याला आत येऊ देते का ते तपासा →

Anthropic चे क्रॉलर: ClaudeBot, Claude-SearchBot आणि Claude-User →