Именик на AI краулери
Кои ботови го читаат вашиот сајт за обука на AI, AI пребарување и одговори во живо, што прави секој од нив според неговиот производител, и како да го дозволите, блокирате или потврдите.
| Краулер | Компанија | Намена |
|---|---|---|
| GPTBot | OpenAI | Обука на AI |
| OAI-SearchBot | OpenAI | AI пребарување |
| ChatGPT-User | OpenAI | Преземање на барање од корисник |
| ClaudeBot | Anthropic | Обука на AI |
| Claude-SearchBot | Anthropic | AI пребарување |
| Claude-User | Anthropic | Преземање на барање од корисник |
| PerplexityBot | Perplexity | AI пребарување |
| Perplexity-User | Perplexity | Преземање на барање од корисник |
| Google-Extended | Обука на AI | |
| Googlebot | Пребарувач | |
| Google-CloudVertexBot | Преземање на барање од корисник | |
| bingbot | Microsoft | Пребарувач |
| Applebot | Apple | Пребарувач |
| Applebot-Extended | Apple | Обука на AI |
| CCBot | Common Crawl | Обука на AI |
| meta-externalagent | Meta | Обука на AI |
| meta-externalfetcher | Meta | Преземање на барање од корисник |
| Amazonbot | Amazon | Обука на AI |
| DuckAssistBot | DuckDuckGo | AI пребарување |
| MistralAI-User | Mistral AI | Преземање на барање од корисник |