Claude-SearchBot
A Claude-SearchBot a webet járja be, hogy javítsa a Claude keresési találatainak relevanciáját és pontosságát. Az Anthropic szerint a letiltása megakadályozza, hogy a tartalmát indexeljék a keresés számára, ami csökkentheti a láthatóságát és a pontosságot a felhasználók keresési találataiban. Engedélyezze, ha azt szeretné, hogy a Claude megtalálja és idézze az oldalait.
Mit csinál
Az Anthropic a Claude-SearchBotot arra használja, hogy a weben navigáljon, és javítsa a keresési találatok minőségét a Claude-felhasználók számára. Elkülönül a ClaudeBottól, a tanítócrawlertől, így engedélyezheti a keresést, miközben kizárja a tanítást.
Az Anthropic szerint a Claude-SearchBot letiltása megakadályozza a tartalom indexelését a keresés optimalizálásához, ami csökkentheti a webhely láthatóságát és pontosságát a felhasználók keresési találataiban. Az Anthropic botjai betartják a robots.txt fájlt és tiszteletben tartják a megkerülés elleni védelmi intézkedéseket, ezért egy CAPTCHA vagy kihívásoldal véget vet a látogatásnak.
A 2026-11 havi vizsgálatunkban a robots.txt-vel rendelkező népszerű webhelyek 12.9% letiltotta. →
robots.txt token
Claude-SearchBot
Hogyan engedélyezheti
User-agent: Claude-SearchBot
Allow: /Hogyan tilthatja le
User-agent: Claude-SearchBot
Disallow: /Hogyan ellenőrizheti a valódi látogatásokat
Az Anthropic a claude.com/crawling/bots.json címen közzéteszi a crawlerei IP-címeit, és azt állítja, hogy az a crawler, amelynek IP-címe szerepel a listán, az Anthropictól származik. A forrás-IP-t a listához hasonlítsa, ne a user agentben bízzon. Az Anthropic nem javasolja az IP-blokkolást a kizáráshoz, mert ez azt is megakadályozza, hogy a crawler beolvassa a robots.txt fájlt.
Ellenőrizze, beengedi-e a webhelye →
Az Anthropic crawlerei: ClaudeBot, Claude-SearchBot és Claude-User →