Claude-SearchBot
Claude-SearchBot gennemgår nettet for at forbedre relevansen og nøjagtigheden af søgeresultater i Claude. Anthropic siger, at en blokering forhindrer, at dit indhold indekseres til søgning, hvilket kan mindske din synlighed og nøjagtigheden i brugernes søgeresultater. Tillad den, hvis du vil have Claude til at finde og citere dine sider.
Hvad den gør
Anthropic bruger Claude-SearchBot til at gennemgå nettet og forbedre kvaliteten af søgeresultater for Claude-brugere. Den er adskilt fra ClaudeBot, trænings-crawleren, så du kan tillade søgning og samtidig fravælge træning.
Anthropic siger, at deaktivering af Claude-SearchBot forhindrer indeksering af dit indhold til søgeoptimering, hvilket kan mindske dit websites synlighed og nøjagtigheden i brugernes søgeresultater. Anthropics bots overholder robots.txt og respekterer foranstaltninger mod omgåelse, så en CAPTCHA eller en udfordringsside afslutter besøget.
I vores undersøgelse fra 2026-11 blokerede 12.9% af populære websites med en robots.txt den. →
robots.txt-token
Claude-SearchBot
Sådan tillader du den
User-agent: Claude-SearchBot
Allow: /
Sådan blokerer du den
User-agent: Claude-SearchBot
Disallow: /
Sådan verificerer du ægte besøg
Anthropic offentliggør IP-adresserne for sine crawlere på claude.com/crawling/bots.json og siger, at en crawler, hvis IP står på listen, kommer fra Anthropic. Sammenlign kilde-IP med listen i stedet for at stole på user agent. Anthropic fraråder at bruge IP-blokering til at fravælge, fordi det også forhindrer crawleren i at læse robots.txt.
Tjek, om dit website lukker den ind →
Anthropics crawlere: ClaudeBot, Claude-SearchBot og Claude-User →