AI კრაულერების კატალოგი
რომელი ბოტები კითხულობენ თქვენს საიტს AI სწავლებისთვის, AI ძიებისთვის და პასუხებისთვის რეალურ დროში, რას აკეთებს თითოეული მისი მომწოდებლის თქმით, და როგორ დავუშვათ, დავბლოკოთ ან გადავამოწმოთ ის.
| კრაულერი | კომპანია | დანიშნულება |
|---|---|---|
| GPTBot | OpenAI | AI სწავლება |
| OAI-SearchBot | OpenAI | AI ძიება |
| ChatGPT-User | OpenAI | მომხმარებლის მოთხოვნით მიღება |
| ClaudeBot | Anthropic | AI სწავლება |
| Claude-SearchBot | Anthropic | AI ძიება |
| Claude-User | Anthropic | მომხმარებლის მოთხოვნით მიღება |
| PerplexityBot | Perplexity | AI ძიება |
| Perplexity-User | Perplexity | მომხმარებლის მოთხოვნით მიღება |
| Google-Extended | AI სწავლება | |
| Googlebot | საძიებო სისტემა | |
| Google-CloudVertexBot | მომხმარებლის მოთხოვნით მიღება | |
| bingbot | Microsoft | საძიებო სისტემა |
| Applebot | Apple | საძიებო სისტემა |
| Applebot-Extended | Apple | AI სწავლება |
| CCBot | Common Crawl | AI სწავლება |
| meta-externalagent | Meta | AI სწავლება |
| meta-externalfetcher | Meta | მომხმარებლის მოთხოვნით მიღება |
| Amazonbot | Amazon | AI სწავლება |
| DuckAssistBot | DuckDuckGo | AI ძიება |
| MistralAI-User | Mistral AI | მომხმარებლის მოთხოვნით მიღება |