AI ക്രോളർ ഡയറക്ടറി
AI പരിശീലനത്തിനും AI സെർച്ചിനും തത്സമയ ഉത്തരങ്ങൾക്കുമായി ഏതൊക്കെ ബോട്ടുകൾ നിങ്ങളുടെ സൈറ്റ് വായിക്കുന്നു, ഓരോന്നും അതിന്റെ കമ്പനി പറയുന്നതനുസരിച്ച് എന്തു ചെയ്യുന്നു, അതിനെ എങ്ങനെ അനുവദിക്കാം, തടയാം, പരിശോധിച്ചുറപ്പിക്കാം.
| ക്രോളർ | കമ്പനി | ഉദ്ദേശ്യം |
|---|---|---|
| GPTBot | OpenAI | AI പരിശീലനം |
| OAI-SearchBot | OpenAI | AI സെർച്ച് |
| ChatGPT-User | OpenAI | ഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച് |
| ClaudeBot | Anthropic | AI പരിശീലനം |
| Claude-SearchBot | Anthropic | AI സെർച്ച് |
| Claude-User | Anthropic | ഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച് |
| PerplexityBot | Perplexity | AI സെർച്ച് |
| Perplexity-User | Perplexity | ഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച് |
| Google-Extended | AI പരിശീലനം | |
| Googlebot | സെർച്ച് എഞ്ചിൻ | |
| Google-CloudVertexBot | ഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച് | |
| bingbot | Microsoft | സെർച്ച് എഞ്ചിൻ |
| Applebot | Apple | സെർച്ച് എഞ്ചിൻ |
| Applebot-Extended | Apple | AI പരിശീലനം |
| CCBot | Common Crawl | AI പരിശീലനം |
| meta-externalagent | Meta | AI പരിശീലനം |
| meta-externalfetcher | Meta | ഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച് |
| Amazonbot | Amazon | AI പരിശീലനം |
| DuckAssistBot | DuckDuckGo | AI സെർച്ച് |
| MistralAI-User | Mistral AI | ഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച് |
നിങ്ങളുടെ സൈറ്റ് ഇതിനെ അകത്തേക്ക് കടത്തുന്നുണ്ടോ എന്ന് പരിശോധിക്കുക →