robots.txt kan ikke hentes
robots.unreachable
Hva det betyr
robots.txt svarte med status 403 eller svarte ikke. Etter RFC 9309 behandler crawlere da hele nettstedet som forbudt.
Prioritet
P1
Slik retter du det
Kjør en gratis sjekk av siden din. Rapporten viser bevisene for dette funnet på nettstedet ditt og en ferdig rettelse du kan lime inn: en endring i robots.txt, en Cloudflare-regel, JSON-LD-markering, et utkast til llms.txt eller en kort instruksjon.
Slik bekrefter du rettelsen
Trykk på "Sjekk på nytt" i rapporten etter endringen: den viser hva som er rettet og hvordan scoren har endret seg.