Claude-User
Claude-User truy cập một trang web khi người dùng Claude đặt câu hỏi cần đến nó, chẳng hạn để đọc một liên kết được chia sẻ. Anthropic cho biết các bot của hãng tuân thủ robots.txt, và chặn Claude-User sẽ ngăn việc lấy nội dung của bạn để trả lời truy vấn của người dùng, có thể làm giảm khả năng hiển thị của bạn trong tìm kiếm web do người dùng điều hướng.
Chức năng
Anthropic dùng Claude-User để hỗ trợ người dùng Claude: khi ai đó hỏi Claude một câu, nó có thể truy cập một trang web để trả lời. Đó là các lượt tải riêng lẻ thay mặt người dùng, không phải thu thập đại trà.
Khác với OpenAI và Perplexity, những bên cho biết trình tải theo yêu cầu người dùng của họ có thể không tuân theo robots.txt, Anthropic nêu rõ các bot của hãng tuân thủ chỉ thị robots.txt và mô tả việc chặn Claude-User tại đó. Làm vậy sẽ ngăn Claude lấy các trang của bạn khi người dùng hỏi về chúng.
Trong nghiên cứu 2026-11 của chúng tôi, 13.1% trang web phổ biến có robots.txt đã chặn bot này. →
Token robots.txt
Claude-User
Cách cho phép
User-agent: Claude-User
Allow: /Cách chặn
User-agent: Claude-User
Disallow: /Cách xác minh lượt truy cập thật
Anthropic công bố địa chỉ IP của các trình thu thập tại claude.com/crawling/bots.json và cho biết trình thu thập có IP nằm trong danh sách đó là của Anthropic. Hãy đối chiếu IP nguồn với danh sách thay vì tin vào user agent. Anthropic khuyên không nên dùng chặn IP để từ chối, vì như vậy trình thu thập cũng không đọc được robots.txt.
Kiểm tra xem trang của bạn có cho nó vào không →
Các trình thu thập dữ liệu của Anthropic: ClaudeBot, Claude-SearchBot và Claude-User →