Claude-SearchBot
Claude-SearchBot pregleduje splet, da izboljša ustreznost in natančnost rezultatov iskanja v Claude. Anthropic navaja, da njegovo blokiranje prepreči indeksiranje vaše vsebine za iskanje, kar lahko zmanjša vašo vidnost in natančnost v rezultatih iskanja uporabnikov. Dovolite ga, če želite, da Claude najde in citira vaše strani.
Kako ga dovoliti
User-agent: Claude-SearchBot
Allow: / Kako ga blokirati
User-agent: Claude-SearchBot
Disallow: / Kaj počne
Anthropic s Claude-SearchBot brska po spletu in izboljšuje kakovost rezultatov iskanja za uporabnike Claude. Ločen je od ClaudeBot, pajka za učenje, zato lahko dovolite iskanje in se hkrati izključite iz učenja.
Anthropic navaja, da onemogočanje Claude-SearchBot prepreči indeksiranje vaše vsebine za optimizacijo iskanja, kar lahko zmanjša vidnost in natančnost vašega spletnega mesta v rezultatih iskanja uporabnikov. Boti Anthropic upoštevajo robots.txt in spoštujejo ukrepe proti obhodu zaščit, zato CAPTCHA ali stran z izzivom obisk konča.
V naši raziskavi iz obdobja 2026-11 ga je blokiralo 12.9% priljubljenih spletnih mest z datoteko robots.txt. →
Oznaka v robots.txt
Claude-SearchBot
Kako preveriti prave obiske
Anthropic objavlja naslove IP svojih pajkov na claude.com/crawling/bots.json in navaja, da pajek, katerega IP je na tem seznamu, prihaja od Anthropic. Izvorni IP primerjajte s seznamom, namesto da zaupate user agentu. Anthropic odsvetuje blokiranje IP kot način za izključitev, ker pajku prepreči tudi branje robots.txt.
Preverite, ali ga vaše spletno mesto spusti →
Pajki Anthropic: ClaudeBot, Claude-SearchBot in Claude-User →