Claude-User
Claude-User Claude foydalanuvchisi bunga ehtiyoj tugʻdiradigan savol berganda, masalan ulashilgan havolani oʻqish uchun veb-saytga tashrif buyuradi. Anthropic oʻz botlari robots.txt ga amal qilishini va Claude-User ni bloklash foydalanuvchi soʻrovlariga javoban kontentingizni olishga toʻsqinlik qilishini aytadi, bu esa foydalanuvchi yoʻnaltirgan veb-qidiruvda koʻrinishingizni pasaytirishi mumkin.
Unga qanday ruxsat berish mumkin
User-agent: Claude-User
Allow: / Uni qanday bloklash mumkin
User-agent: Claude-User
Disallow: / U nima qiladi
Anthropic Claude-User dan Claude foydalanuvchilarini qoʻllab-quvvatlash uchun foydalanadi: kimdir Claudeʼga savol berganda, u javob berish uchun veb-saytga kirishi mumkin. Bular umumiy skanerlash emas, foydalanuvchi nomidan bajariladigan alohida yuklashlar.
Foydalanuvchi soʻrovi boʻyicha yuklaydigan agentlari robots.txt ga amal qilmasligi mumkinligini aytadigan OpenAI va Perplexityʼdan farqli oʻlaroq, Anthropic oʻz botlari robots.txt direktivalariga amal qilishini bildiradi va Claude-User ni u yerda bloklashni tavsiflaydi. Bunday qilish foydalanuvchilar sahifalaringiz haqida soʻraganda Claudeʼning ularni olishiga toʻsqinlik qiladi.
Tadqiqotimizda (2026-11) robots.txt fayli bor mashhur saytlarning 13.1% qismi uni bloklagan. →
robots.txt tokeni
Claude-User
Haqiqiy tashriflarni qanday tasdiqlash mumkin
Anthropic oʻz kraulerlarining IP manzillarini claude.com/crawling/bots.json manzilida eʼlon qiladi va IPʼsi shu roʻyxatda boʻlgan krauler Anthropicʼdan ekanini aytadi. User agentga ishonish oʻrniga manba IPʼni roʻyxat bilan solishtiring. Anthropic voz kechish uchun IP boʻyicha bloklashdan foydalanishni tavsiya etmaydi, chunki bu kraulerga robots.txt ni oʻqishga ham toʻsqinlik qiladi.
Saytingiz unga ruxsat berishini tekshiring →
Anthropic kraulerlari: ClaudeBot, Claude-SearchBot va Claude-User →