MistralAI-User
MistralAI-User bezoekt een webpagina wanneer een gebruiker de assistent van Mistral een vraag stelt, en het antwoord kan naar de bron linken. Mistral zegt dat hij niet wordt gebruikt voor automatisch crawlen of voor training van generatieve AI, en dat het robots.txt-token MistralAI-User bepaalt naar welke sites deze verzoeken mogen gaan.
Wat de crawler doet
Mistral zegt dat MistralAI-User bedoeld is voor gebruikersacties in zijn assistent: als een gebruiker een vraag stelt, kan hij een webpagina bezoeken om te helpen antwoorden en een link naar de bron in het antwoord opnemen. Hij wordt niet gebruikt om het web automatisch te crawlen of voor training van generatieve AI.
Mistral gebruikt aparte tokens voor zijn andere agents: MistralAI-Index voor zoekindexering en MistralAI-Training voor trainingsdatasets. MistralAI-User blokkeren raakt alleen live opvragingen namens een gebruiker.
robots.txt-token
MistralAI-User
User-agentstring
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; MistralAI-User/1.0; +https://docs.mistral.ai/robots)
Zo sta je hem toe
User-agent: MistralAI-User
Allow: /
Zo blokkeer je hem
User-agent: MistralAI-User
Disallow: /
Zo verifieer je echte bezoeken
Mistral publiceert de IP-adressen die MistralAI-User gebruikt. Vergelijk het bron-IP van een verzoek met die lijst in plaats van de user agent te vertrouwen.