ClaudeBot

Anthropic · AI ուսուցում

ClaudeBot-ը Anthropic-ի ռոբոտն է այն վեբ բովանդակության համար, որը կարող է օգտագործվել նրա գեներատիվ AI մոդելները ուսուցանելու համար։ robots.txt-ում այն արգելելը ազդանշան է, որ ձեր կայքի ապագա բովանդակությունը պետք է բացառվի ուսուցումից։ Միայն այն արգելափակելը չի կանգնեցնում Claude-SearchBot-ին կամ Claude-User-ին, որոնք սպասարկում են որոնումը և կենդանի պատասխանները։

Ինչպես թույլատրել

User-agent: ClaudeBot
Allow: /

Ինչպես արգելափակել

User-agent: ClaudeBot
Disallow: /

Ինչ է անում

Anthropic-ն ասում է, որ ClaudeBot-ը հավաքում է վեբ բովանդակություն, որը կարող է նպաստել իր մոդելների ուսուցմանը՝ բարձրացնելով դրանց օգտակարությունն ու անվտանգությունը։ ClaudeBot-ն արգելելը ազդանշան է, որ ձեր կայքի ապագա նյութերը պետք է բացառվեն ուսուցման տվյալների հավաքածուներից։

Anthropic-ն աջակցում է նաև ոչ ստանդարտ Crawl-delay հրահանգին, ուստի կարող եք դանդաղեցնել ClaudeBot-ին՝ այն արգելափակելու փոխարեն։ robots.txt-ում ClaudeBot-ին անվանող կանոնները գերակայում են Anthropic-ի AI ուսուցումից հրաժարվելու ընդհանուր ազդանշանի նկատմամբ։ robots.txt-ի կանոնները գործում են յուրաքանչյուր հոսթի համար առանձին, ուստի ավելացրեք դրանք բոլոր այն ենթադոմեններում, որոնք ցանկանում եք ընդգրկել։

Մեր 2026-11-ի ուսումնասիրության մեջ robots.txt ունեցող հայտնի կայքերի 21.2%-ն արգելափակել է այն։ →

robots.txt նշան

ClaudeBot

Ինչպես ստուգել իրական այցելությունները

Anthropic-ն իր ռոբոտների IP հասցեները հրապարակում է claude.com/crawling/bots.json հասցեում և ասում, որ ռոբոտը, որի IP-ն այդ ցուցակում է, գալիս է Anthropic-ից։ Համեմատեք աղբյուր IP-ն ցուցակի հետ՝ user agent-ին վստահելու փոխարեն։ Anthropic-ը խորհուրդ չի տալիս հրաժարվելու համար օգտագործել IP արգելափակում, քանի որ այն նաև խանգարում է ռոբոտին կարդալ robots.txt-ը։

Ստուգեք, արդյոք ձեր կայքը թույլ է տալիս նրան →

Anthropic-ի ռոբոտները. ClaudeBot, Claude-SearchBot և Claude-User →