Claude-SearchBot
Claude-SearchBot e zvarrit web-in për të përmirësuar rëndësinë dhe saktësinë e rezultateve të kërkimit në Claude. Anthropic thotë se bllokimi i tij e pengon indeksimin e përmbajtjes suaj për kërkim, gjë që mund të ulë dukshmërinë dhe saktësinë tuaj në rezultatet e kërkimit të përdoruesve. Lejojeni nëse doni që Claude t'i gjejë dhe t'i citojë faqet tuaja.
Si ta lejoni
User-agent: Claude-SearchBot
Allow: / Si ta bllokoni
User-agent: Claude-SearchBot
Disallow: / Çfarë bën
Anthropic e përdor Claude-SearchBot për të lundruar në web dhe për të përmirësuar cilësinë e rezultateve të kërkimit për përdoruesit e Claude. Është i ndarë nga ClaudeBot, zvarritësi i trajnimit, ndaj mund ta lejoni kërkimin ndërsa refuzoni trajnimin.
Anthropic thotë se çaktivizimi i Claude-SearchBot e pengon indeksimin e përmbajtjes suaj për optimizimin e kërkimit, gjë që mund të ulë dukshmërinë dhe saktësinë e sajtit tuaj në rezultatet e kërkimit të përdoruesve. Botët e Anthropic e respektojnë robots.txt dhe masat kundër anashkalimit, ndaj një CAPTCHA ose faqe sfide e përfundon vizitën.
Në studimin tonë të 2026-11, 12.9% e sajteve të njohura me robots.txt e bllokonin. →
Token-i në robots.txt
Claude-SearchBot
Si të verifikoni vizitat reale
Anthropic i publikon adresat IP të zvarritësve të saj te claude.com/crawling/bots.json dhe thotë se një zvarritës IP-ja e të cilit është në atë listë vjen nga Anthropic. Krahasoni IP-në burimore me listën në vend që t'i besoni user agent-it. Anthropic këshillon të mos përdoret bllokimi i IP-ve për refuzim, sepse ai e pengon zvarritësin edhe të lexojë robots.txt.
Kontrolloni nëse sajti juaj e lë të hyjë →
Zvarritësit e Anthropic: ClaudeBot, Claude-SearchBot dhe Claude-User →