Claude-User
Claude-User посетува сајт кога корисник на Claude ќе постави прашање за кое е потребно тоа, на пример за да прочита споделена врска. Anthropic вели дека неговите ботови го почитуваат robots.txt, и дека блокирањето на Claude-User го спречува преземањето на вашата содржина како одговор на прашањата на корисниците, што може да ја намали вашата видливост во веб-пребарувањето насочено од корисниците.
Како да се дозволи
User-agent: Claude-User
Allow: / Како да се блокира
User-agent: Claude-User
Disallow: / Што прави
Anthropic го користи Claude-User за поддршка на корисниците на Claude: кога некој ќе му постави прашање на Claude, тој може да пристапи до сајт за да одговори. Тоа се поединечни преземања во име на корисникот, а не општо обиколување.
За разлика од OpenAI и Perplexity, кои велат дека нивните преземачи на барање од корисник можеби не го следат robots.txt, Anthropic наведува дека неговите ботови ги почитуваат директивите во robots.txt и опишува како таму да се блокира Claude-User. Со тоа Claude не може да ги презема вашите страници кога корисниците прашуваат за нив.
Во нашата студија од 2026-11, 13.1% од популарните сајтови со robots.txt го блокираа. →
Ознака за robots.txt
Claude-User
Како да се потврдат вистинските посети
Anthropic ги објавува IP адресите на своите краулери на claude.com/crawling/bots.json и вели дека краулер чија IP адреса е на таа листа доаѓа од Anthropic. Споредете ја изворната IP адреса со листата наместо да му верувате на user agent-от. Anthropic не препорачува блокирање по IP за да се откажете, бидејќи тоа го спречува краулерот и да го прочита robots.txt.
Проверете дали вашиот сајт го пушта →
Краулерите на Anthropic: ClaudeBot, Claude-SearchBot и Claude-User →