A robots.txt egy HTML-oldal
robots.invalid
Mit jelent
A robots.txt címe HTML-t ad vissza (gyakran 200-as státusszal kiszolgált 404-es oldalt), ezért a crawlerek nem tudnak szabályokat olvasni.
Prioritás
P2
Hogyan javítható
Futtasson ingyenes ellenőrzést az oldalán. A jelentés megmutatja a találat bizonyítékait a webhelyén, és egy beilleszthető javítást: robots.txt-módosítást, Cloudflare-szabályt, JSON-LD-jelölést, llms.txt-tervezetet vagy rövid útmutatást.
Hogyan győződhet meg a javításról
A módosítás után kattintson a jelentésben az „Újraellenőrzés” gombra: látni fogja, mi javult, és hogyan változott a pontszám.