GPTBot 只能获取到占位页面
access.soft_block
含义
使用 GPTBot user agent 的请求返回了状态 200,但页面文本是拦截提示,或比浏览器获取的内容短得多。
优先级
P1–P3,取决于爬虫类型
如何修复
免费检测你的页面。报告会显示这条发现在你网站上的证据,以及可直接粘贴的修复方案:robots.txt 修改、Cloudflare 规则、JSON-LD 标记、llms.txt 草稿或一条简短说明。
如何确认修复
修改后,在报告上点击“再次检测”:它会列出已修复的内容以及评分的变化。