robots.txt — це HTML-сторінка
robots.invalid
Що це означає
За адресою robots.txt повертається HTML (часто сторінка 404 зі статусом 200), тому краулери не можуть прочитати жодного правила.
Пріоритет
P2
Як виправити
Запустіть безкоштовну перевірку своєї сторінки. Звіт покаже докази цієї знахідки на вашому сайті й готове виправлення: зміну robots.txt, правило Cloudflare, розмітку JSON-LD, чернетку llms.txt або коротку інструкцію.
Як перевірити виправлення
Після зміни натисніть «Перевірити ще раз» у звіті: він покаже, що виправлено і як змінилася оцінка.