Imenik AI crawlera

Koji botovi čitaju vašu web-stranicu za treniranje AI-ja, AI pretraživanje i odgovore uživo, što svaki od njih radi prema navodima dobavljača te kako ga dopustiti, blokirati ili provjeriti.

CrawlerTvrtkaNamjena
GPTBotOpenAITreniranje AI-ja
OAI-SearchBotOpenAIAI pretraživanje
ChatGPT-UserOpenAIDohvaćanje na zahtjev korisnika
ClaudeBotAnthropicTreniranje AI-ja
Claude-SearchBotAnthropicAI pretraživanje
Claude-UserAnthropicDohvaćanje na zahtjev korisnika
PerplexityBotPerplexityAI pretraživanje
Perplexity-UserPerplexityDohvaćanje na zahtjev korisnika
Google-ExtendedGoogleTreniranje AI-ja
GooglebotGoogleTražilica
Google-CloudVertexBotGoogleDohvaćanje na zahtjev korisnika
bingbotMicrosoftTražilica
ApplebotAppleTražilica
Applebot-ExtendedAppleTreniranje AI-ja
CCBotCommon CrawlTreniranje AI-ja
meta-externalagentMetaTreniranje AI-ja
meta-externalfetcherMetaDohvaćanje na zahtjev korisnika
AmazonbotAmazonTreniranje AI-ja
DuckAssistBotDuckDuckGoAI pretraživanje
MistralAI-UserMistral AIDohvaćanje na zahtjev korisnika

Provjerite propušta li ga vaša web-stranica →