Claude-SearchBot
يزحف Claude-SearchBot إلى الويب لتحسين صلة نتائج البحث في Claude ودقتها. تقول Anthropic إن حجبه يمنع فهرسة محتواك لأغراض البحث، وقد يقلل ذلك من ظهورك ودقة نتائج البحث للمستخدمين. اسمح به إذا أردت أن يجد Claude صفحاتك ويستشهد بها.
ما الذي يفعله
تستخدم Anthropic الزاحف Claude-SearchBot للتنقل في الويب وتحسين جودة نتائج البحث لمستخدمي Claude. وهو منفصل عن ClaudeBot، زاحف التدريب، فيمكنك السماح بالبحث مع الانسحاب من التدريب.
تقول Anthropic إن تعطيل Claude-SearchBot يمنع فهرسة محتواك لأغراض تحسين البحث، وقد يقلل ذلك من ظهور موقعك ودقة نتائج البحث للمستخدمين. وتلتزم بوتات Anthropic بملف robots.txt وتحترم إجراءات منع الالتفاف، فيُنهي اختبار CAPTCHA أو صفحة التحقق الزيارة.
في دراستنا لشهر 2026-11، حجبه 12.9% من المواقع الشائعة التي لديها ملف robots.txt. →
رمز robots.txt
Claude-SearchBot
كيف تسمح به
User-agent: Claude-SearchBot
Allow: /كيف تحجبه
User-agent: Claude-SearchBot
Disallow: /كيف تتحقق من الزيارات الحقيقية
تنشر Anthropic عناوين IP لزواحفها على claude.com/crawling/bots.json وتقول إن الزاحف الذي يرد عنوان IP الخاص به في تلك القائمة يأتي من Anthropic. طابق عنوان IP المصدر مع القائمة بدلًا من الوثوق بوكيل المستخدم. وتنصح Anthropic بعدم استخدام حجب IP للانسحاب، لأنه يمنع الزاحف أيضًا من قراءة robots.txt.