ЖИ краулерлерінің анықтамалығы
Қай боттар сайтыңызды ЖИ-ді оқыту, ЖИ іздеу және тікелей жауаптар үшін оқиды, жеткізушісінің айтуынша әрқайсысы не істейді және оны қалай өткізуге, бұғаттауға немесе тексеруге болады.
| Краулер | Компания | Мақсаты |
|---|---|---|
| GPTBot | OpenAI | ЖИ-ді оқыту |
| OAI-SearchBot | OpenAI | ЖИ іздеу |
| ChatGPT-User | OpenAI | Пайдаланушы сұраған жүктеу |
| ClaudeBot | Anthropic | ЖИ-ді оқыту |
| Claude-SearchBot | Anthropic | ЖИ іздеу |
| Claude-User | Anthropic | Пайдаланушы сұраған жүктеу |
| PerplexityBot | Perplexity | ЖИ іздеу |
| Perplexity-User | Perplexity | Пайдаланушы сұраған жүктеу |
| Google-Extended | ЖИ-ді оқыту | |
| Googlebot | Іздеу жүйесі | |
| Google-CloudVertexBot | Пайдаланушы сұраған жүктеу | |
| bingbot | Microsoft | Іздеу жүйесі |
| Applebot | Apple | Іздеу жүйесі |
| Applebot-Extended | Apple | ЖИ-ді оқыту |
| CCBot | Common Crawl | ЖИ-ді оқыту |
| meta-externalagent | Meta | ЖИ-ді оқыту |
| meta-externalfetcher | Meta | Пайдаланушы сұраған жүктеу |
| Amazonbot | Amazon | ЖИ-ді оқыту |
| DuckAssistBot | DuckDuckGo | ЖИ іздеу |
| MistralAI-User | Mistral AI | Пайдаланушы сұраған жүктеу |