Claude-User
Claude-User відвідує сайт, коли користувач Claude ставить запитання, для якого це потрібно, наприклад щоб прочитати надіслане посилання. Anthropic каже, що її боти дотримуються robots.txt, а блокування Claude-User не дає отримувати ваш контент у відповідь на запити користувачів, що може зменшити вашу видимість у веб-пошуку на запит користувача.
Що він робить
Anthropic використовує Claude-User, щоб допомагати користувачам Claude: коли хтось ставить Claude запитання, він може відкрити сайт, щоб відповісти. Це окремі завантаження від імені користувача, а не загальний обхід.
На відміну від OpenAI і Perplexity, які кажуть, що їхні завантажувачі на запит користувача можуть не дотримуватися robots.txt, Anthropic заявляє, що її боти дотримуються директив robots.txt, і описує блокування Claude-User саме там. Це не дає Claude отримувати ваші сторінки, коли користувачі питають про них.
У нашому дослідженні за 2026-11 його заблокували 13.1% популярних сайтів із robots.txt. →
Токен robots.txt
Claude-User
Як його дозволити
User-agent: Claude-User
Allow: /Як його заблокувати
User-agent: Claude-User
Disallow: /Як перевірити справжні візити
Anthropic публікує IP-адреси своїх краулерів за адресою claude.com/crawling/bots.json і стверджує, що краулер, чий IP є в цьому списку, походить від Anthropic. Порівнюйте IP джерела зі списком, а не довіряйте user agent. Anthropic не радить відмовлятися від краулінгу через блокування за IP, бо тоді краулер не зможе прочитати й robots.txt.
Перевірте, чи пускає його ваш сайт →
Краулери Anthropic: ClaudeBot, Claude-SearchBot і Claude-User →