Claude-SearchBot
Claude-SearchBot rastreja el web per millorar la rellevància i la precisió dels resultats de cerca de Claude. Anthropic diu que bloquejar-lo impedeix que el teu contingut s'indexi per a la cerca, cosa que pot reduir la teva visibilitat i precisió als resultats de cerca dels usuaris. Permet-lo si vols que Claude trobi i citi les teves pàgines.
Com permetre'l
User-agent: Claude-SearchBot
Allow: / Com bloquejar-lo
User-agent: Claude-SearchBot
Disallow: / Què fa
Anthropic fa servir Claude-SearchBot per navegar pel web i millorar la qualitat dels resultats de cerca per als usuaris de Claude. És independent de ClaudeBot, el rastrejador d'entrenament, així que pots permetre la cerca i alhora excloure't de l'entrenament.
Anthropic diu que desactivar Claude-SearchBot impedeix indexar el teu contingut per optimitzar la cerca, cosa que pot reduir la visibilitat i la precisió del teu lloc als resultats de cerca dels usuaris. Els bots d'Anthropic respecten robots.txt i les mesures contra l'elusió, així que un CAPTCHA o una pàgina de desafiament posen fi a la visita.
Al nostre estudi de 2026-11, el 12.9% dels llocs populars amb robots.txt el bloquejaven. →
Token de robots.txt
Claude-SearchBot
Com verificar les visites reals
Anthropic publica les adreces IP dels seus rastrejadors a claude.com/crawling/bots.json i diu que un rastrejador amb una IP d'aquesta llista és d'Anthropic. Compara la IP d'origen amb la llista en lloc de fiar-te del user agent. Anthropic desaconsella bloquejar per IP per excloure't, perquè així el rastrejador tampoc pot llegir robots.txt.
Comprova si el teu lloc el deixa entrar →
Els rastrejadors d'Anthropic: ClaudeBot, Claude-SearchBot i Claude-User →