Trang không tồn tại trả về 200 thay vì 404
Lần kiểm tra đã yêu cầu một địa chỉ bịa ra trên site của bạn (/aisw-not-a-page- theo sau là các ký tự ngẫu nhiên) và nhận về một trang HTML bình thường với trạng thái 200 thay vì 404. Hãy để máy chủ hoặc ứng dụng trả về trạng thái 404 cho các địa chỉ không tồn tại; nó vẫn có thể hiển thị trang lỗi riêng của bạn.
Ý nghĩa
Chúng tôi yêu cầu một địa chỉ bịa ra và trang web trả về một trang bình thường. Khi đó công cụ tìm kiếm lập chỉ mục trang lỗi như trang thật (soft 404). Hãy trả về trạng thái 404 cho địa chỉ không tồn tại.
Vì sao điều này quan trọng với tìm kiếm AI
Khi một trang không tồn tại trả về 200, công cụ tìm kiếm không thể phân biệt nó với trang thật. Trang lỗi có thể bị thu thập và lập chỉ mục, mọi liên kết hỏng hoặc gõ sai trông như một trang hoạt động, và Google liệt kê các trang này là soft 404 trong Search Console. Trình thu thập cũng tiếp tục tốn yêu cầu cho những địa chỉ lẽ ra đã bị loại bỏ.
Ở đây chỉ mã trạng thái là quan trọng: một trang lỗi thân thiện vẫn ổn miễn là nó được gửi với 404 (hoặc 410). Chuyển hướng địa chỉ bịa ra, ví dụ về trang chủ, không bị lần kiểm tra này báo, nhưng công cụ tìm kiếm thường cũng coi các chuyển hướng như vậy là soft 404.
Cách khắc phục
- Mở một địa chỉ bịa ra trên site của bạn và xem trạng thái của nó trong bảng mạng của trình duyệt hoặc bằng
curl -I. - Tìm xem cái gì đang trả lời địa chỉ đó. Nguyên nhân thường gặp là một route bắt mọi thứ trong ứng dụng, một quy tắc máy chủ gửi mọi đường dẫn tới
index.html, hoặc một plugin CMS hiển thị trang chủ cho các trang không tồn tại. - Cho nhánh xử lý không tìm thấy đặt trạng thái: trong nginx,
try_fileskết thúc bằng=404cộng vớierror_page; trong Apache,ErrorDocument 404với đường dẫn cục bộ (URL đầy đủ sẽ biến nó thành chuyển hướng); trong Next.js,notFound(); trong Express,res.status(404). - Với ứng dụng một trang, chỉ để máy chủ trả
index.htmlcho các route mà ứng dụng biết và gửi mọi thứ khác tới trang 404. Thẻnoindextrên giao diện không tìm thấy của ứng dụng giúp công cụ tìm kiếm nhưng không đổi trạng thái, nên lần kiểm tra vẫn báo. - Chạy lại kiểm tra toàn site từ tài khoản của bạn để xác nhận kết quả.
Ví dụ
# nginx
location / {
try_files $uri $uri/ =404;
}
error_page 404 /404.html;
# Apache (.htaccess)
ErrorDocument 404 /404.html Cách xác nhận đã khắc phục
Sau khi thay đổi, nhấn "Kiểm tra lại" trên báo cáo: báo cáo liệt kê những gì đã khắc phục và điểm thay đổi ra sao.