Κατάλογος crawlers AI
Ποια bots διαβάζουν τον ιστότοπό σας για εκπαίδευση AI, αναζήτηση AI και ζωντανές απαντήσεις, τι κάνει το καθένα σύμφωνα με τον φορέα λειτουργίας του και πώς να το επιτρέψετε, να το μπλοκάρετε ή να το επαληθεύσετε.
| Crawler | Εταιρεία | Σκοπός |
|---|---|---|
| GPTBot | OpenAI | Εκπαίδευση AI |
| OAI-SearchBot | OpenAI | Αναζήτηση AI |
| ChatGPT-User | OpenAI | Ανάκτηση κατόπιν αιτήματος χρήστη |
| ClaudeBot | Anthropic | Εκπαίδευση AI |
| Claude-SearchBot | Anthropic | Αναζήτηση AI |
| Claude-User | Anthropic | Ανάκτηση κατόπιν αιτήματος χρήστη |
| PerplexityBot | Perplexity | Αναζήτηση AI |
| Perplexity-User | Perplexity | Ανάκτηση κατόπιν αιτήματος χρήστη |
| Google-Extended | Εκπαίδευση AI | |
| Googlebot | Μηχανή αναζήτησης | |
| Google-CloudVertexBot | Ανάκτηση κατόπιν αιτήματος χρήστη | |
| bingbot | Microsoft | Μηχανή αναζήτησης |
| Applebot | Apple | Μηχανή αναζήτησης |
| Applebot-Extended | Apple | Εκπαίδευση AI |
| CCBot | Common Crawl | Εκπαίδευση AI |
| meta-externalagent | Meta | Εκπαίδευση AI |
| meta-externalfetcher | Meta | Ανάκτηση κατόπιν αιτήματος χρήστη |
| Amazonbot | Amazon | Εκπαίδευση AI |
| DuckAssistBot | DuckDuckGo | Αναζήτηση AI |
| MistralAI-User | Mistral AI | Ανάκτηση κατόπιν αιτήματος χρήστη |