Claude-User
A Claude-User akkor látogat meg egy webhelyet, amikor egy Claude-felhasználó olyan kérdést tesz fel, amelyhez erre szükség van, például egy megosztott hivatkozás elolvasásához. Az Anthropic szerint a botjai betartják a robots.txt fájlt, és a Claude-User letiltása megakadályozza a tartalom lekérését a felhasználói lekérdezésekre válaszul, ami csökkentheti a láthatóságot a felhasználó által irányított webes keresésben.
Mit csinál
Az Anthropic a Claude-Usert a Claude-felhasználók támogatására használja: amikor valaki kérdést tesz fel a Claude-nak, az a válaszhoz felkeresheti a webhelyet. Ezek egyedi lekérések a felhasználó nevében, nem általános bejárás.
Az OpenAI-jal és a Perplexityvel ellentétben, amelyek szerint a felhasználói kérésre működő lekérőik nem feltétlenül követik a robots.txt fájlt, az Anthropic kijelenti, hogy a botjai betartják a robots.txt direktíváit, és ott írja le a Claude-User letiltását. Ezzel megakadályozza, hogy a Claude lekérje az oldalait, amikor a felhasználók kérdeznek róluk.
A 2026-11 havi vizsgálatunkban a robots.txt-vel rendelkező népszerű webhelyek 13.1% letiltotta. →
robots.txt token
Claude-User
Hogyan engedélyezheti
User-agent: Claude-User
Allow: /
Hogyan tilthatja le
User-agent: Claude-User
Disallow: /
Hogyan ellenőrizheti a valódi látogatásokat
Az Anthropic a claude.com/crawling/bots.json címen közzéteszi a crawlerei IP-címeit, és azt állítja, hogy az a crawler, amelynek IP-címe szerepel a listán, az Anthropictól származik. A forrás-IP-t a listához hasonlítsa, ne a user agentben bízzon. Az Anthropic nem javasolja az IP-blokkolást a kizáráshoz, mert ez azt is megakadályozza, hogy a crawler beolvassa a robots.txt fájlt.
Ellenőrizze, beengedi-e a webhelye →
Az Anthropic crawlerei: ClaudeBot, Claude-SearchBot és Claude-User →