Claude-User
Claude-User posjećuje web-stranicu kada korisnik Claudea postavi pitanje za koje je to potrebno, na primjer čitanje podijeljene poveznice. Anthropic navodi da njegovi botovi poštuju robots.txt i da blokiranje Claude-Usera sprječava dohvaćanje vašeg sadržaja kao odgovor na upite korisnika, što može smanjiti vašu vidljivost u web-pretraživanju koje usmjeravaju korisnici.
Kako ga dopustiti
User-agent: Claude-User
Allow: / Kako ga blokirati
User-agent: Claude-User
Disallow: / Što radi
Anthropic koristi Claude-User kao podršku korisnicima Claudea: kada netko Claudeu postavi pitanje, on može pristupiti web-stranici kako bi odgovorio. To su pojedinačna dohvaćanja u ime korisnika, a ne opće pretraživanje.
Za razliku od OpenAI-ja i Perplexityja, koji navode da njihovi alati za dohvaćanje na zahtjev korisnika možda ne slijede robots.txt, Anthropic navodi da njegovi botovi poštuju direktive robots.txt i opisuje kako ondje blokirati Claude-User. Time se Claudeu onemogućuje dohvaćanje vaših stranica kada korisnici pitaju o njima.
U našem istraživanju iz razdoblja 2026-11 blokiralo ga je 13.1% popularnih web-stranica s datotekom robots.txt. →
Token za robots.txt
Claude-User
Kako provjeriti stvarne posjete
Anthropic objavljuje IP adrese svojih crawlera na claude.com/crawling/bots.json i navodi da crawler čija je IP adresa na tom popisu dolazi od Anthropica. Usporedite izvornu IP adresu s popisom umjesto da vjerujete user agentu. Anthropic ne preporučuje blokiranje IP adresa kao način isključivanja jer crawler tada ne može pročitati ni robots.txt.
Provjerite propušta li ga vaša web-stranica →
Anthropicovi crawleri: ClaudeBot, Claude-SearchBot i Claude-User →