Claude-User
Claude-User mengunjungi situs web ketika pengguna Claude mengajukan pertanyaan yang membutuhkannya, misalnya membaca tautan yang dibagikan. Anthropic menyatakan botnya mematuhi robots.txt, dan bahwa memblokir Claude-User mencegah pengambilan konten Anda sebagai respons terhadap pertanyaan pengguna, yang dapat mengurangi visibilitas Anda dalam pencarian web yang diarahkan pengguna.
Fungsinya
Anthropic memakai Claude-User untuk mendukung pengguna Claude: ketika seseorang mengajukan pertanyaan kepada Claude, Claude dapat mengakses situs web untuk menjawabnya. Ini adalah pengambilan individual atas nama pengguna, bukan crawl umum.
Berbeda dengan OpenAI dan Perplexity, yang menyatakan fetcher atas permintaan pengguna mereka mungkin tidak mengikuti robots.txt, Anthropic menyatakan botnya mematuhi direktif robots.txt dan menjelaskan cara memblokir Claude-User di sana. Dengan begitu Claude tidak dapat mengambil halaman Anda saat pengguna menanyakannya.
Dalam studi kami pada 2026-11, 13.1% situs populer yang memiliki robots.txt memblokirnya. →
Token robots.txt
Claude-User
Cara mengizinkannya
User-agent: Claude-User
Allow: /Cara memblokirnya
User-agent: Claude-User
Disallow: /Cara memverifikasi kunjungan asli
Anthropic mempublikasikan alamat IP crawler-nya di claude.com/crawling/bots.json dan menyatakan bahwa crawler dengan IP yang tercantum dalam daftar itu berasal dari Anthropic. Cocokkan IP sumber dengan daftar tersebut, jangan percaya begitu saja pada user agent. Anthropic tidak menyarankan pemblokiran IP untuk memilih keluar, karena hal itu juga menghentikan crawler membaca robots.txt.
Periksa apakah situs Anda mengizinkannya →
Crawler Anthropic: ClaudeBot, Claude-SearchBot, dan Claude-User →