Adresár AI crawlerov

Ktoré boty čítajú váš web na trénovanie AI, AI vyhľadávanie a živé odpovede, čo podľa dodávateľa robí každý z nich a ako ho povoliť, zablokovať alebo overiť.

CrawlerSpoločnosťÚčel
GPTBotOpenAITrénovanie AI
OAI-SearchBotOpenAIAI vyhľadávanie
ChatGPT-UserOpenAISťahovanie na žiadosť používateľa
ClaudeBotAnthropicTrénovanie AI
Claude-SearchBotAnthropicAI vyhľadávanie
Claude-UserAnthropicSťahovanie na žiadosť používateľa
PerplexityBotPerplexityAI vyhľadávanie
Perplexity-UserPerplexitySťahovanie na žiadosť používateľa
Google-ExtendedGoogleTrénovanie AI
GooglebotGoogleVyhľadávač
Google-CloudVertexBotGoogleSťahovanie na žiadosť používateľa
bingbotMicrosoftVyhľadávač
ApplebotAppleVyhľadávač
Applebot-ExtendedAppleTrénovanie AI
CCBotCommon CrawlTrénovanie AI
meta-externalagentMetaTrénovanie AI
meta-externalfetcherMetaSťahovanie na žiadosť používateľa
AmazonbotAmazonTrénovanie AI
DuckAssistBotDuckDuckGoAI vyhľadávanie
MistralAI-UserMistral AISťahovanie na žiadosť používateľa

Skontrolujte, či ho váš web pustí →