OAI-SearchBot
OpenAI · AI 搜索
OAI-SearchBot 是 OpenAI 的搜索爬虫,用于在 ChatGPT 的搜索功能中展示网站。OpenAI 表示,选择退出 OAI-SearchBot 的网站不会出现在 ChatGPT 搜索回答中,但仍可能作为导航链接出现。如果希望 ChatGPT 引用你的页面,请允许它。
它的作用
OpenAI 使用 OAI-SearchBot 在 ChatGPT 搜索功能的结果中展示网站。它不是训练爬虫:模型训练由 GPTBot 单独控制。
OpenAI 表示,选择退出 OAI-SearchBot 的网站不会出现在 ChatGPT 搜索回答中,但仍可能作为导航链接出现。robots.txt 更新后,OpenAI 的系统可能需要约 24 小时才会生效。
在我们 2026-11 的研究中,有 robots.txt 的热门网站里,11.2% 屏蔽了它。 →
robots.txt 标识
OAI-SearchBot
User agent 字符串
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot
如何允许
User-agent: OAI-SearchBot
Allow: /
如何屏蔽
User-agent: OAI-SearchBot
Disallow: /
如何验证真实访问
OpenAI 以 JSON 文件形式公布该代理使用的 IP 范围。请将请求的来源 IP 与这些范围比对;自称 OAI-SearchBot 但来自其他地址的请求并非来自 OpenAI。OpenAI 提示,user agent 中的版本号可能变化,因此请匹配 OAI-SearchBot 标识,而不是整个字符串。