Claude-User
Το Claude-User επισκέπτεται έναν ιστότοπο όταν το απαιτεί η ερώτηση ενός χρήστη του Claude, για παράδειγμα για να διαβάσει έναν κοινόχρηστο σύνδεσμο. Η Anthropic λέει ότι τα bots της τηρούν το robots.txt και ότι το μπλοκάρισμα του Claude-User εμποδίζει την ανάκτηση του περιεχομένου σας ως απάντηση σε ερωτήματα χρηστών, κάτι που μπορεί να μειώσει την ορατότητά σας στην αναζήτηση στον ιστό που κατευθύνεται από τον χρήστη.
Τι κάνει
Η Anthropic χρησιμοποιεί το Claude-User για να υποστηρίζει τους χρήστες του Claude: όταν κάποιος κάνει μια ερώτηση στο Claude, μπορεί να μπει σε έναν ιστότοπο για να την απαντήσει. Πρόκειται για μεμονωμένες ανακτήσεις για λογαριασμό ενός χρήστη και όχι για γενική ανίχνευση.
Σε αντίθεση με την OpenAI και την Perplexity, που λένε ότι οι fetchers τους για αιτήματα χρηστών μπορεί να μην ακολουθούν το robots.txt, η Anthropic δηλώνει ότι τα bots της τηρούν τις οδηγίες του robots.txt και περιγράφει εκεί το μπλοκάρισμα του Claude-User. Έτσι εμποδίζετε το Claude να ανακτά τις σελίδες σας όταν οι χρήστες ρωτούν γι' αυτές.
Στη μελέτη μας για τον 2026-11, το 13.1% των δημοφιλών ιστότοπων με robots.txt το μπλόκαρε. →
Token robots.txt
Claude-User
Πώς να το επιτρέψετε
User-agent: Claude-User
Allow: /
Πώς να το μπλοκάρετε
User-agent: Claude-User
Disallow: /
Πώς να επαληθεύσετε τις πραγματικές επισκέψεις
Η Anthropic δημοσιεύει τις διευθύνσεις IP των crawlers της στο claude.com/crawling/bots.json και λέει ότι ένας crawler του οποίου η IP βρίσκεται σε αυτή τη λίστα προέρχεται από την Anthropic. Συγκρίνετε την IP προέλευσης με τη λίστα αντί να εμπιστεύεστε το user agent. Η Anthropic συνιστά να μη χρησιμοποιείτε μπλοκάρισμα IP για αποκλεισμό, επειδή εμποδίζει τον crawler να διαβάσει και το robots.txt.
Ελέγξτε αν ο ιστότοπός σας το αφήνει να μπει →
Οι crawlers της Anthropic: ClaudeBot, Claude-SearchBot και Claude-User →