מדריך סורקי AI
אילו בוטים קוראים את האתר שלכם לצורך אימון AI, חיפוש מבוסס AI ותשובות בזמן אמת, מה כל אחד עושה לפי החברה שמפעילה אותו, ואיך לאפשר, לחסום או לאמת אותו.
| סורק | חברה | מטרה |
|---|---|---|
| GPTBot | OpenAI | אימון AI |
| OAI-SearchBot | OpenAI | חיפוש מבוסס AI |
| ChatGPT-User | OpenAI | משיכה לבקשת משתמש |
| ClaudeBot | Anthropic | אימון AI |
| Claude-SearchBot | Anthropic | חיפוש מבוסס AI |
| Claude-User | Anthropic | משיכה לבקשת משתמש |
| PerplexityBot | Perplexity | חיפוש מבוסס AI |
| Perplexity-User | Perplexity | משיכה לבקשת משתמש |
| Google-Extended | אימון AI | |
| Googlebot | מנוע חיפוש | |
| Google-CloudVertexBot | משיכה לבקשת משתמש | |
| bingbot | Microsoft | מנוע חיפוש |
| Applebot | Apple | מנוע חיפוש |
| Applebot-Extended | Apple | אימון AI |
| CCBot | Common Crawl | אימון AI |
| meta-externalagent | Meta | אימון AI |
| meta-externalfetcher | Meta | משיכה לבקשת משתמש |
| Amazonbot | Amazon | אימון AI |
| DuckAssistBot | DuckDuckGo | חיפוש מבוסס AI |
| MistralAI-User | Mistral AI | משיכה לבקשת משתמש |