Claude-SearchBot
Claude-SearchBot melayari web untuk meningkatkan kerelevanan dan ketepatan hasil carian dalam Claude. Anthropic menyatakan bahawa menyekatnya menghalang kandungan anda diindeks untuk carian, yang mungkin mengurangkan keterlihatan dan ketepatan dalam hasil carian pengguna. Benarkannya jika anda mahu Claude menemui dan memetik halaman anda.
Fungsinya
Anthropic menggunakan Claude-SearchBot untuk melayari web dan meningkatkan kualiti hasil carian bagi pengguna Claude. Ia berasingan daripada ClaudeBot, perangkak latihan, jadi anda boleh membenarkan carian sambil menarik diri daripada latihan.
Anthropic menyatakan bahawa melumpuhkan Claude-SearchBot menghalang pengindeksan kandungan anda untuk pengoptimuman carian, yang mungkin mengurangkan keterlihatan dan ketepatan laman anda dalam hasil carian pengguna. Bot Anthropic mematuhi robots.txt dan menghormati langkah anti-pintasan, jadi CAPTCHA atau halaman cabaran menamatkan lawatan.
Dalam kajian 2026-11 kami, 12.9% laman popular yang mempunyai robots.txt telah menyekatnya. →
Token robots.txt
Claude-SearchBot
Cara membenarkannya
User-agent: Claude-SearchBot
Allow: /Cara menyekatnya
User-agent: Claude-SearchBot
Disallow: /Cara mengesahkan lawatan sebenar
Anthropic menerbitkan alamat IP perangkaknya di claude.com/crawling/bots.json dan menyatakan perangkak yang IP-nya ada dalam senarai itu datang daripada Anthropic. Padankan IP sumber dengan senarai tersebut dan bukannya mempercayai user agent. Anthropic menasihatkan agar tidak menggunakan sekatan IP untuk menarik diri, kerana ia juga menghalang perangkak daripada membaca robots.txt.
Semak sama ada laman anda membenarkannya masuk →
Crawler Anthropic: ClaudeBot, Claude-SearchBot dan Claude-User →