AI ക്രോളർ ഡയറക്ടറി

AI പരിശീലനത്തിനും AI സെർച്ചിനും തത്സമയ ഉത്തരങ്ങൾക്കുമായി ഏതൊക്കെ ബോട്ടുകൾ നിങ്ങളുടെ സൈറ്റ് വായിക്കുന്നു, ഓരോന്നും അതിന്റെ കമ്പനി പറയുന്നതനുസരിച്ച് എന്തു ചെയ്യുന്നു, അതിനെ എങ്ങനെ അനുവദിക്കാം, തടയാം, പരിശോധിച്ചുറപ്പിക്കാം.

ക്രോളർകമ്പനിഉദ്ദേശ്യം
GPTBotOpenAIAI പരിശീലനം
OAI-SearchBotOpenAIAI സെർച്ച്
ChatGPT-UserOpenAIഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച്
ClaudeBotAnthropicAI പരിശീലനം
Claude-SearchBotAnthropicAI സെർച്ച്
Claude-UserAnthropicഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച്
PerplexityBotPerplexityAI സെർച്ച്
Perplexity-UserPerplexityഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച്
Google-ExtendedGoogleAI പരിശീലനം
GooglebotGoogleസെർച്ച് എഞ്ചിൻ
Google-CloudVertexBotGoogleഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച്
bingbotMicrosoftസെർച്ച് എഞ്ചിൻ
ApplebotAppleസെർച്ച് എഞ്ചിൻ
Applebot-ExtendedAppleAI പരിശീലനം
CCBotCommon CrawlAI പരിശീലനം
meta-externalagentMetaAI പരിശീലനം
meta-externalfetcherMetaഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച്
AmazonbotAmazonAI പരിശീലനം
DuckAssistBotDuckDuckGoAI സെർച്ച്
MistralAI-UserMistral AIഉപയോക്താവ് ആവശ്യപ്പെട്ട ഫെച്ച്

നിങ്ങളുടെ സൈറ്റ് ഇതിനെ അകത്തേക്ക് കടത്തുന്നുണ്ടോ എന്ന് പരിശോധിക്കുക →