Stránky, které procházení odmítly: 2

Stručná odpověď

Tyto stránky odpověděly 401, 403, 429 nebo 503, nebo jim vypršel časový limit, když je audit stahoval jako prohlížeč. Často jde o firewall, ochranu proti botům nebo omezení počtu požadavků, ne o rozbitou stránku. Ověřte, zda vyhledávací a AI crawlery dostávají stejnou odpověď.

crawl.unreachable · Priorita: P1–P3 podle typu crawleru

Co to znamená

Tyto stránky odpověděly 401, 403, 429 nebo 503, případně vypršel časový limit. Firewall nebo omezení počtu požadavků možná zastavuje i crawlery. Ověřte, zda vyhledávací a AI crawlery dostávají stejnou odpověď.

Proč na tom záleží pro AI vyhledávání

Audit stahuje mnoho stránek za krátkou dobu z jednoho serveru, takže omezení počtu požadavků může odpovědět 429 nebo 503, i když lidé stránku dostanou. Pokud stejné pravidlo platí pro vyhledávací a AI crawlery, tyto stránky se pro jejich indexy nestáhnou a nelze je citovat v odpovědích AI.

401 znamená, že stránka vyžaduje přihlášení, což se u účtů očekává, ale u veřejného obsahu ne. 503 na každé stránce může znamenat, že zůstal zapnutý režim údržby. Tyto stránky jsou oddělené od nefunkčních odkazů, protože oprava závisí na tom, kdo je odmítán.

Jak to opravit

  1. Otevřete několik uvedených URL v anonymním okně prohlížeče. Pokud se načtou, blokace míří na automatizované požadavky.
  2. Vyhledejte odmítnuté požadavky v logech firewallu, CDN nebo hostingu. Zajistěte, aby byly povolené ověřené vyhledávací crawlery jako Googlebot a Bingbot i AI vyhledávací crawlery, které chcete; mnoho CDN, včetně Cloudflare, má nastavení pro ověřené boty.
  3. Pokud příčinou bylo omezení počtu požadavků, zvyšte limit pro běžné požadavky na stránky nebo z něj HTML stránky vyjměte.
  4. Pokud stránky odpovídají 401, odstraňte přihlášení z veřejných stránek nebo přestaňte z veřejných stránek odkazovat na soukromé.
  5. Spusťte audit webu znovu ze svého účtu a ověřte výsledek.

Jak ověřit opravu

Po změně klikněte ve zprávě na „Zkontrolovat znovu“: uvidíte, co bylo opraveno a jak se změnilo skóre.

Zkontrolovat mou stránku →

Všechna zjištění a jak funguje skóre