دليل زواحف الذكاء الاصطناعي
أي البوتات تقرأ موقعك لأغراض تدريب الذكاء الاصطناعي والبحث بالذكاء الاصطناعي والإجابات الفورية، وما الذي يفعله كل منها بحسب الجهة المشغّلة له، وكيف تسمح به أو تحجبه أو تتحقق منه.
| الزاحف | الشركة | الغرض |
|---|---|---|
| GPTBot | OpenAI | تدريب الذكاء الاصطناعي |
| OAI-SearchBot | OpenAI | البحث بالذكاء الاصطناعي |
| ChatGPT-User | OpenAI | جلب بطلب من المستخدم |
| ClaudeBot | Anthropic | تدريب الذكاء الاصطناعي |
| Claude-SearchBot | Anthropic | البحث بالذكاء الاصطناعي |
| Claude-User | Anthropic | جلب بطلب من المستخدم |
| PerplexityBot | Perplexity | البحث بالذكاء الاصطناعي |
| Perplexity-User | Perplexity | جلب بطلب من المستخدم |
| Google-Extended | تدريب الذكاء الاصطناعي | |
| Googlebot | محرك بحث | |
| Google-CloudVertexBot | جلب بطلب من المستخدم | |
| bingbot | Microsoft | محرك بحث |
| Applebot | Apple | محرك بحث |
| Applebot-Extended | Apple | تدريب الذكاء الاصطناعي |
| CCBot | Common Crawl | تدريب الذكاء الاصطناعي |
| meta-externalagent | Meta | تدريب الذكاء الاصطناعي |
| meta-externalfetcher | Meta | جلب بطلب من المستخدم |
| Amazonbot | Amazon | تدريب الذكاء الاصطناعي |
| DuckAssistBot | DuckDuckGo | البحث بالذكاء الاصطناعي |
| MistralAI-User | Mistral AI | جلب بطلب من المستخدم |