Saraka ya crawler za AI
Ni bot zipi husoma tovuti yako kwa mafunzo ya AI, utafutaji wa AI na majibu ya moja kwa moja, kila moja hufanya nini kwa mujibu wa mtoa huduma wake, na jinsi ya kuiruhusu, kuizuia au kuithibitisha.
| Crawler | Kampuni | Kusudi |
|---|---|---|
| GPTBot | OpenAI | Mafunzo ya AI |
| OAI-SearchBot | OpenAI | Utafutaji wa AI |
| ChatGPT-User | OpenAI | Upakuaji ulioombwa na mtumiaji |
| ClaudeBot | Anthropic | Mafunzo ya AI |
| Claude-SearchBot | Anthropic | Utafutaji wa AI |
| Claude-User | Anthropic | Upakuaji ulioombwa na mtumiaji |
| PerplexityBot | Perplexity | Utafutaji wa AI |
| Perplexity-User | Perplexity | Upakuaji ulioombwa na mtumiaji |
| Google-Extended | Mafunzo ya AI | |
| Googlebot | Injini ya utafutaji | |
| Google-CloudVertexBot | Upakuaji ulioombwa na mtumiaji | |
| bingbot | Microsoft | Injini ya utafutaji |
| Applebot | Apple | Injini ya utafutaji |
| Applebot-Extended | Apple | Mafunzo ya AI |
| CCBot | Common Crawl | Mafunzo ya AI |
| meta-externalagent | Meta | Mafunzo ya AI |
| meta-externalfetcher | Meta | Upakuaji ulioombwa na mtumiaji |
| Amazonbot | Amazon | Mafunzo ya AI |
| DuckAssistBot | DuckDuckGo | Utafutaji wa AI |
| MistralAI-User | Mistral AI | Upakuaji ulioombwa na mtumiaji |