不存在的页面返回 200 而不是 404

简短回答

审计请求了你网站上一个编造的地址(/aisw-not-a-page- 后跟随机字符),得到的是状态码 200 的普通 HTML 页面,而不是 404。请让服务器或应用对不存在的地址返回 404 状态码;页面上仍然可以显示你自己的错误页。

crawl.soft_404 · 优先级: P1–P3,取决于爬虫类型

含义

我们请求了一个虚构的地址,网站却返回了正常页面。搜索引擎会因此把错误页面当作真实页面编入索引(软 404)。请对不存在的地址返回 404 状态。

为什么这对 AI 搜索很重要

不存在的页面返回 200 时,搜索引擎无法把它与真实页面区分开。错误页可能被抓取和索引,每个失效或拼错的链接看起来都像可用的页面,Google 会在 Search Console 中把这些页面列为软 404。爬虫还会继续在本应放弃的地址上浪费请求。

这里只看状态码:友好的错误页没有问题,只要它以 404(或 410)发送。把编造的地址重定向到其他地方(例如首页)不会被这项检测报告,但搜索引擎通常也会把这种重定向视为软 404。

如何修复

  1. 在你的网站上打开一个编造的地址,在浏览器的网络面板中或用 curl -I 查看它的状态码。
  2. 找出是什么在响应它。常见原因有应用中的通配路由、把所有路径都发送到 index.html 的服务器规则,或对不存在的页面显示首页的 CMS 插件。
  3. 让“未找到”的处理路径设置状态码:在 nginx 中,使用以 =404 结尾的 try_files 加上 error_page;在 Apache 中,使用带本地路径的 ErrorDocument 404(完整 URL 会把它变成重定向);在 Next.js 中,使用 notFound();在 Express 中,使用 res.status(404)。
  4. 对于单页应用,让服务器只对应用已知的路由返回 index.html,其他所有地址都发送到 404 页面。在应用的“未找到”视图上加 noindex 标签对搜索引擎有帮助,但不会改变状态码,所以检测仍会报告它。
  5. 在你的账户中再次运行全站审计,确认结果。

示例

# nginx
location / {
    try_files $uri $uri/ =404;
}
error_page 404 /404.html;

# Apache (.htaccess)
ErrorDocument 404 /404.html

如何确认修复

修改后,在报告上点击“再次检测”:它会列出已修复的内容以及评分的变化。

检测我的页面 →

所有发现及评分计算方式