Claude-User
Claude-User visita un sito web quando un utente di Claude pone una domanda che lo richiede, per esempio per leggere un link condiviso. Anthropic afferma che i suoi bot rispettano il robots.txt e che bloccare Claude-User impedisce il recupero dei tuoi contenuti in risposta alle domande degli utenti, il che può ridurre la tua visibilità nella ricerca web guidata dall'utente.
Cosa fa
Anthropic usa Claude-User per supportare gli utenti di Claude: quando qualcuno pone una domanda a Claude, questo può accedere a un sito web per rispondere. Sono recuperi singoli per conto dell'utente, non una scansione generale.
A differenza di OpenAI e Perplexity, che dichiarano che i loro fetcher richiesti dall'utente potrebbero non seguire il robots.txt, Anthropic dichiara che i suoi bot rispettano le direttive del robots.txt e descrive come bloccare Claude-User in quel file. In questo modo Claude non può recuperare le tue pagine quando gli utenti le chiedono.
Nel nostro studio di 2026-11, 13.1% dei siti popolari con un robots.txt lo bloccava. →
Token robots.txt
Claude-User
Come consentirlo
User-agent: Claude-User
Allow: /Come bloccarlo
User-agent: Claude-User
Disallow: /Come verificare le visite reali
Anthropic pubblica gli indirizzi IP dei suoi crawler su claude.com/crawling/bots.json e dichiara che un crawler il cui IP è presente in quell'elenco proviene da Anthropic. Confronta l'IP di origine con l'elenco invece di fidarti dello user agent. Anthropic sconsiglia di usare il blocco per IP per rinunciare, perché impedisce anche al crawler di leggere il robots.txt.
Controlla se il tuo sito lo lascia entrare →
I crawler di Anthropic: ClaudeBot, Claude-SearchBot e Claude-User →