Claude-SearchBot
Claude-SearchBot prechádza web, aby zlepšil relevantnosť a presnosť výsledkov vyhľadávania v Claude. Anthropic uvádza, že jeho zablokovanie zabráni indexovaniu vášho obsahu pre vyhľadávanie, čo môže znížiť vašu viditeľnosť a presnosť vo výsledkoch vyhľadávania používateľov. Povoľte ho, ak chcete, aby Claude vaše stránky nachádzal a citoval.
Ako ho povoliť
User-agent: Claude-SearchBot
Allow: / Ako ho zablokovať
User-agent: Claude-SearchBot
Disallow: / Čo robí
Anthropic používa Claude-SearchBot na prechádzanie webu a zlepšovanie kvality výsledkov vyhľadávania pre používateľov Claude. Je oddelený od ClaudeBot, tréningového crawlera, takže môžete povoliť vyhľadávanie a zároveň sa odhlásiť z trénovania.
Anthropic uvádza, že vypnutie Claude-SearchBot zabráni indexovaniu vášho obsahu na optimalizáciu vyhľadávania, čo môže znížiť viditeľnosť a presnosť vášho webu vo výsledkoch vyhľadávania používateľov. Boty Anthropic dodržiavajú robots.txt a rešpektujú opatrenia proti obchádzaniu, takže CAPTCHA alebo overovacia stránka návštevu ukončí.
V našej štúdii z obdobia 2026-11 ho zablokovalo 12.9% populárnych webov s robots.txt. →
Token robots.txt
Claude-SearchBot
Ako overiť skutočné návštevy
Anthropic zverejňuje IP adresy svojich crawlerov na claude.com/crawling/bots.json a uvádza, že crawler, ktorého IP je v tomto zozname, pochádza od Anthropic. Porovnajte zdrojovú IP so zoznamom namiesto toho, aby ste verili user agentovi. Anthropic neodporúča odhlasovať sa blokovaním IP, pretože to crawlerovi zabráni aj v čítaní robots.txt.
Skontrolujte, či ho váš web pustí →
Crawlery Anthropic: ClaudeBot, Claude-SearchBot a Claude-User →