robots.txt là một trang HTML
robots.invalid
Ý nghĩa
Địa chỉ robots.txt trả về HTML (thường là trang 404 được trả với trạng thái 200), nên trình thu thập không đọc được quy tắc nào.
Mức ưu tiên
P2
Cách khắc phục
Chạy kiểm tra miễn phí cho trang của bạn. Báo cáo cho thấy bằng chứng của phát hiện này trên trang web của bạn và cách khắc phục sẵn để dán: thay đổi robots.txt, quy tắc Cloudflare, mã JSON-LD, bản nháp llms.txt hoặc một hướng dẫn ngắn.
Cách xác nhận đã khắc phục
Sau khi thay đổi, nhấn "Kiểm tra lại" trên báo cáo: báo cáo liệt kê những gì đã khắc phục và điểm thay đổi ra sao.