Claude-SearchBot
Claude-SearchBot prochází web, aby zlepšil relevanci a přesnost výsledků vyhledávání v Claude. Anthropic uvádí, že jeho zablokování brání indexaci vašeho obsahu pro vyhledávání, což může snížit vaši viditelnost a přesnost ve výsledcích vyhledávání uživatelů. Povolte ho, pokud chcete, aby Claude vaše stránky nacházel a citoval.
Co dělá
Anthropic používá Claude-SearchBot k procházení webu a zlepšování kvality výsledků vyhledávání pro uživatele Claude. Je oddělený od ClaudeBot, crawleru pro trénování, takže můžete povolit vyhledávání a zároveň trénování odmítnout.
Anthropic uvádí, že vypnutí Claude-SearchBot brání indexaci vašeho obsahu pro optimalizaci vyhledávání, což může snížit viditelnost vašeho webu a přesnost ve výsledcích vyhledávání uživatelů. Boti Anthropic dodržují robots.txt a respektují opatření proti obcházení, takže CAPTCHA nebo stránka s ověřením návštěvu ukončí.
V naší studii z období 2026-11 ho zablokovalo 12.9% oblíbených webů s robots.txt. →
Token pro robots.txt
Claude-SearchBot
Jak ho povolit
User-agent: Claude-SearchBot
Allow: /
Jak ho zablokovat
User-agent: Claude-SearchBot
Disallow: /
Jak ověřit skutečné návštěvy
Anthropic zveřejňuje IP adresy svých crawlerů na claude.com/crawling/bots.json a uvádí, že crawler, jehož IP je na tomto seznamu, pochází od Anthropic. Porovnejte zdrojovou IP se seznamem a nespoléhejte na user agent. Anthropic nedoporučuje k odmítnutí používat blokování IP, protože crawleru znemožní číst i robots.txt.
Zkontrolujte, zda ho váš web pouští →
Crawlery Anthropic: ClaudeBot, Claude-SearchBot a Claude-User →