Direktori perangkak AI
Bot mana yang membaca laman anda untuk latihan AI, carian AI dan jawapan langsung, apa yang dilakukan setiap satu menurut vendornya, dan cara membenarkan, menyekat atau mengesahkannya.
| Perangkak | Syarikat | Tujuan |
|---|---|---|
| GPTBot | OpenAI | Latihan AI |
| OAI-SearchBot | OpenAI | Carian AI |
| ChatGPT-User | OpenAI | Capaian atas permintaan pengguna |
| ClaudeBot | Anthropic | Latihan AI |
| Claude-SearchBot | Anthropic | Carian AI |
| Claude-User | Anthropic | Capaian atas permintaan pengguna |
| PerplexityBot | Perplexity | Carian AI |
| Perplexity-User | Perplexity | Capaian atas permintaan pengguna |
| Google-Extended | Latihan AI | |
| Googlebot | Enjin carian | |
| Google-CloudVertexBot | Capaian atas permintaan pengguna | |
| bingbot | Microsoft | Enjin carian |
| Applebot | Apple | Enjin carian |
| Applebot-Extended | Apple | Latihan AI |
| CCBot | Common Crawl | Latihan AI |
| meta-externalagent | Meta | Latihan AI |
| meta-externalfetcher | Meta | Capaian atas permintaan pengguna |
| Amazonbot | Amazon | Latihan AI |
| DuckAssistBot | DuckDuckGo | Carian AI |
| MistralAI-User | Mistral AI | Capaian atas permintaan pengguna |