Именик на AI краулери

Кои ботови го читаат вашиот сајт за обука на AI, AI пребарување и одговори во живо, што прави секој од нив според неговиот производител, и како да го дозволите, блокирате или потврдите.

КраулерКомпанијаНамена
GPTBotOpenAIОбука на AI
OAI-SearchBotOpenAIAI пребарување
ChatGPT-UserOpenAIПреземање на барање од корисник
ClaudeBotAnthropicОбука на AI
Claude-SearchBotAnthropicAI пребарување
Claude-UserAnthropicПреземање на барање од корисник
PerplexityBotPerplexityAI пребарување
Perplexity-UserPerplexityПреземање на барање од корисник
Google-ExtendedGoogleОбука на AI
GooglebotGoogleПребарувач
Google-CloudVertexBotGoogleПреземање на барање од корисник
bingbotMicrosoftПребарувач
ApplebotAppleПребарувач
Applebot-ExtendedAppleОбука на AI
CCBotCommon CrawlОбука на AI
meta-externalagentMetaОбука на AI
meta-externalfetcherMetaПреземање на барање од корисник
AmazonbotAmazonОбука на AI
DuckAssistBotDuckDuckGoAI пребарување
MistralAI-UserMistral AIПреземање на барање од корисник

Проверете дали вашиот сајт го пушта →