Saraka ya crawler za AI

Ni bot zipi husoma tovuti yako kwa mafunzo ya AI, utafutaji wa AI na majibu ya moja kwa moja, kila moja hufanya nini kwa mujibu wa mtoa huduma wake, na jinsi ya kuiruhusu, kuizuia au kuithibitisha.

CrawlerKampuniKusudi
GPTBotOpenAIMafunzo ya AI
OAI-SearchBotOpenAIUtafutaji wa AI
ChatGPT-UserOpenAIUpakuaji ulioombwa na mtumiaji
ClaudeBotAnthropicMafunzo ya AI
Claude-SearchBotAnthropicUtafutaji wa AI
Claude-UserAnthropicUpakuaji ulioombwa na mtumiaji
PerplexityBotPerplexityUtafutaji wa AI
Perplexity-UserPerplexityUpakuaji ulioombwa na mtumiaji
Google-ExtendedGoogleMafunzo ya AI
GooglebotGoogleInjini ya utafutaji
Google-CloudVertexBotGoogleUpakuaji ulioombwa na mtumiaji
bingbotMicrosoftInjini ya utafutaji
ApplebotAppleInjini ya utafutaji
Applebot-ExtendedAppleMafunzo ya AI
CCBotCommon CrawlMafunzo ya AI
meta-externalagentMetaMafunzo ya AI
meta-externalfetcherMetaUpakuaji ulioombwa na mtumiaji
AmazonbotAmazonMafunzo ya AI
DuckAssistBotDuckDuckGoUtafutaji wa AI
MistralAI-UserMistral AIUpakuaji ulioombwa na mtumiaji

Kagua kama tovuti yako inairuhusu kuingia →