robots.txt nelze stáhnout
robots.unreachable
Co to znamená
robots.txt odpověděl stavem 403 nebo neodpověděl vůbec. Podle RFC 9309 pak crawlery považují celý web za zakázaný.
Priorita
P1
Jak to opravit
Spusťte bezplatnou kontrolu své stránky. Zpráva ukáže důkazy tohoto zjištění na vašem webu a hotovou opravu k vložení: změnu v robots.txt, pravidlo Cloudflare, značky JSON-LD, návrh llms.txt nebo krátký pokyn.
Jak ověřit opravu
Po změně klikněte ve zprávě na „Zkontrolovat znovu“: uvidíte, co bylo opraveno a jak se změnilo skóre.