sitemap 中有 2 个 URL 重定向或出错

简短回答

这些 URL 在站点地图中,但没有直接加载:它们会重定向、返回错误、以 401、403、429 或 503 拒绝请求,或者超时。站点地图应只列出返回 200 的最终 URL。请把被重定向的 URL 替换为其目标,并移除已不存在的页面。

crawl.sitemap_not_ok · 优先级: P1–P3,取决于爬虫类型

含义

sitemap 应只列出返回 200 的最终 URL。请把重定向的 URL 换成其目标地址,并删除失效的 URL。

为什么这对 AI 搜索很重要

搜索引擎把站点地图当作你希望被抓取和索引的 URL 列表。其中的重定向和错误会浪费抓取请求,并让站点地图成为不太可靠的信号;Google 的文档要求列出你希望出现在搜索中的规范 URL。

拒绝了审计的页面可能对普通人是正常的,却仍被列在这里,所以请把它们与“拒绝抓取的页面”这一发现进行比较。其余的通常来自基于旧数据生成的站点地图、使用 http:// 或错误主机的站点地图,或页面迁移后没人更新的静态文件。

如何修复

  1. 查看该发现中每个条目的状态码和最终 URL。
  2. 对于重定向,改为列出最终 URL,其协议、主机和结尾斜杠与网站一致。由 CMS 或框架根据实时页面生成的站点地图可以避免大部分此类问题。
  3. 对于 404 和 410,把该 URL 从站点地图中移除。对于 5xx 错误,修复页面,或在它恢复正常前不列出。
  4. 对于 401、403、429、503 和超时,先检查页面能否在浏览器中加载;如果能,原因就是防火墙或速率限制。
  5. 在你的账户中再次运行全站审计,确认结果。

示例

<url>
  <loc>https://example.com/pricing/</loc>
</url>

如何确认修复

修改后,在报告上点击“再次检测”:它会列出已修复的内容以及评分的变化。

检测我的页面 →

所有发现及评分计算方式