Claude-User

Anthropic · યુઝરની વિનંતીથી મેળવવું

જ્યારે Claudeનો યુઝર એવો પ્રશ્ન પૂછે જેના માટે વેબસાઇટની જરૂર હોય, જેમ કે શેર કરેલી લિંક વાંચવી, ત્યારે Claude-User તેની મુલાકાત લે છે. Anthropic કહે છે કે તેના બૉટ robots.txtનું પાલન કરે છે, અને Claude-Userને બ્લૉક કરવાથી યુઝરના પ્રશ્નોના જવાબમાં તમારું કન્ટેન્ટ મેળવી શકાતું નથી, જેનાથી યુઝર દ્વારા થતા વેબ સર્ચમાં તમારું દેખાવું ઘટી શકે છે.

તેને કેવી રીતે આવવા દેવો

User-agent: Claude-User
Allow: /

તેને કેવી રીતે બ્લૉક કરવો

User-agent: Claude-User
Disallow: /

તે શું કરે છે

Anthropic Claudeના યુઝરને મદદ કરવા Claude-User વાપરે છે: જ્યારે કોઈ Claudeને પ્રશ્ન પૂછે, ત્યારે જવાબ આપવા તે કોઈ વેબસાઇટ ખોલી શકે છે. આ યુઝર વતી થતી એકલદોકલ વિનંતીઓ છે, સામાન્ય ક્રૉલ નહીં.

OpenAI અને Perplexity કહે છે કે તેમના યુઝરની વિનંતીથી પેજ મેળવતા બૉટ robots.txtનું પાલન ન પણ કરે, પણ Anthropic જણાવે છે કે તેના બૉટ robots.txtના ડિરેક્ટિવનું પાલન કરે છે અને ત્યાં Claude-Userને બ્લૉક કરવાની રીત વર્ણવે છે. એમ કરવાથી, યુઝર તમારાં પેજ વિશે પૂછે ત્યારે Claude તેને મેળવી શકતો નથી.

અમારા 2026-11ના અભ્યાસમાં, robots.txt ધરાવતી લોકપ્રિય સાઇટમાંથી 13.1% સાઇટે તેને બ્લૉક કર્યો હતો. →

robots.txt ટોકન

Claude-User

સાચી મુલાકાતો કેવી રીતે ચકાસવી

Anthropic તેના ક્રૉલરનાં IP સરનામાં claude.com/crawling/bots.json પર પ્રકાશિત કરે છે અને કહે છે કે જે ક્રૉલરનું IP એ યાદીમાં હોય તે Anthropic તરફથી આવે છે. યુઝર એજન્ટ પર ભરોસો કરવાને બદલે સ્રોત IPને યાદી સાથે મેળવો. Anthropic opt out કરવા માટે IP બ્લૉકિંગ ન વાપરવાની સલાહ આપે છે, કારણ કે તેનાથી ક્રૉલર robots.txt પણ વાંચી શકતો નથી.

તપાસો કે તમારી સાઇટ તેને આવવા દે છે કે નહીં →

Anthropicના ક્રૉલર: ClaudeBot, Claude-SearchBot અને Claude-User →