MistralAI-User
Mistral AI · 用户请求的抓取
当用户向 Mistral 的助手提问时,MistralAI-User 会访问网页,回答中可能附有来源链接。Mistral 表示它不用于自动爬取或生成式 AI 训练,且 MistralAI-User 的 robots.txt 标识决定了这些请求可以访问哪些网站。
它的作用
Mistral 表示,MistralAI-User 用于其助手中的用户操作:用户提问时,它可能访问某个网页以协助回答,并在回复中附上来源链接。它不用于自动爬取网络,也不用于生成式 AI 训练。
Mistral 为其他代理使用单独的标识:MistralAI-Index 用于搜索索引,MistralAI-Training 用于训练数据集。屏蔽 MistralAI-User 只影响代表用户进行的实时抓取。
robots.txt 标识
MistralAI-User
User agent 字符串
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; MistralAI-User/1.0; +https://docs.mistral.ai/robots)
如何允许
User-agent: MistralAI-User
Allow: /
如何屏蔽
User-agent: MistralAI-User
Disallow: /
如何验证真实访问
Mistral 公布了 MistralAI-User 使用的 IP 地址。请将请求的来源 IP 与该列表比对,而不要信任 user agent。