Claude-User

Anthropic · యూజర్ అభ్యర్థించిన ఫెచ్

షేర్ చేసిన లింక్‌ను చదవడం వంటి, అవసరమైన ప్రశ్నను Claude యూజర్ అడిగినప్పుడు Claude-User వెబ్‌సైట్‌ను సందర్శిస్తుంది. తన బాట్‌లు robots.txtను పాటిస్తాయని, Claude-Userను బ్లాక్ చేస్తే యూజర్ ప్రశ్నలకు జవాబుగా మీ కంటెంట్ తెచ్చుకోబడదని, అది యూజర్ నడిపే వెబ్ సెర్చ్‌లో మీ విజిబిలిటీని తగ్గించవచ్చని Anthropic చెబుతుంది.

దీన్ని ఎలా అనుమతించాలి

User-agent: Claude-User
Allow: /

దీన్ని ఎలా బ్లాక్ చేయాలి

User-agent: Claude-User
Disallow: /

ఇది ఏమి చేస్తుంది

Claude యూజర్‌లకు సహాయపడటానికి Anthropic Claude-Userను ఉపయోగిస్తుంది: ఎవరైనా Claudeను ప్రశ్న అడిగినప్పుడు, జవాబివ్వడానికి అది వెబ్‌సైట్‌ను చేరుకోవచ్చు. ఇవి సాధారణ క్రాల్ కాదు, యూజర్ తరపున చేసే వ్యక్తిగత ఫెచ్‌లు.

తమ యూజర్ అభ్యర్థించే ఫెచర్‌లు robots.txtను పాటించకపోవచ్చని చెప్పే OpenAI, Perplexityలా కాకుండా, తన బాట్‌లు robots.txt directivesను పాటిస్తాయని Anthropic చెబుతుంది, అక్కడ Claude-Userను బ్లాక్ చేయడాన్ని వివరిస్తుంది. అలా చేస్తే యూజర్‌లు మీ పేజీల గురించి అడిగినప్పుడు Claude వాటిని తెచ్చుకోదు.

మా 2026-11 అధ్యయనంలో, robots.txt ఉన్న ప్రముఖ సైట్‌లలో 13.1% దీన్ని బ్లాక్ చేశాయి. →

robots.txt టోకెన్

Claude-User

నిజమైన సందర్శనలను ఎలా ధృవీకరించాలి

Anthropic తన క్రాలర్‌ల IP చిరునామాలను claude.com/crawling/bots.jsonలో ప్రచురిస్తుంది, ఆ జాబితాలో IP ఉన్న క్రాలర్ Anthropic నుంచి వచ్చినదని చెబుతుంది. యూజర్ ఏజెంట్‌ను నమ్మడానికి బదులు సోర్స్ IPని జాబితాతో సరిపోల్చండి. opt out చేయడానికి IP బ్లాకింగ్ ఉపయోగించవద్దని Anthropic సలహా ఇస్తుంది, ఎందుకంటే అది క్రాలర్ robots.txtను చదవడాన్ని కూడా ఆపుతుంది.

మీ సైట్ దీన్ని అనుమతిస్తోందో తనిఖీ చేయండి →

Anthropic క్రాలర్‌లు: ClaudeBot, Claude-SearchBot, Claude-User →