Pagini care au refuzat scanarea: 2

Răspuns scurt

Aceste pagini au răspuns cu 401, 403, 429 sau 503 ori au expirat când auditul le-a descărcat ca un browser. Adesea cauza este un firewall, o protecție anti-bot sau o limită de rată, nu o pagină stricată. Verifică dacă crawlerele de căutare și AI primesc același răspuns.

crawl.unreachable · Prioritate: P1–P3, după tipul de crawler

Ce înseamnă

Aceste pagini au răspuns 401, 403, 429 sau 503 ori nu au răspuns la timp. Un firewall sau o limită de cereri poate opri și crawlerele. Verifică dacă crawlerele motoarelor de căutare și cele AI primesc același răspuns.

De ce contează pentru căutarea AI

Auditul descarcă multe pagini într-un timp scurt de pe un singur server, așa că o limită de rată poate răspunde cu 429 sau 503 chiar dacă oamenii primesc pagina. Dacă aceeași regulă se aplică crawlerelor de căutare și AI, aceste pagini nu sunt descărcate pentru indexurile lor și nu pot fi citate în răspunsurile AI.

Un 401 înseamnă că pagina cere autentificare, ceea ce este normal pentru zonele de cont, dar nu și pentru conținutul public. Un 503 pe fiecare pagină poate însemna că modul de mentenanță a rămas activ. Aceste pagini sunt ținute separat de linkurile nefuncționale, pentru că remediul depinde de cine este refuzat.

Cum se remediază

  1. Deschide câteva dintre URL-urile listate într-o fereastră privată de browser. Dacă se încarcă, blocarea vizează cererile automate.
  2. Caută cererile refuzate în logurile firewallului, ale CDN-ului sau ale hostingului. Asigură-te că sunt permise crawlerele de căutare verificate, precum Googlebot și Bingbot, și crawlerele de căutare AI pe care le vrei; multe CDN-uri, printre care Cloudflare, au o setare pentru boții verificați.
  3. Dacă a cauzat-o o limită de rată, ridică limita pentru cererile obișnuite de pagini sau exclude paginile HTML din ea.
  4. Dacă paginile răspund cu 401, elimină autentificarea de pe paginile publice sau nu mai pune linkuri către pagini private din cele publice.
  5. Rulează din nou auditul de site din contul tău ca să confirmi rezultatul.

Cum confirmi remediul

După modificare, apasă „Verifică din nou” în raport: vezi ce s-a remediat și cum s-a schimbat scorul.

Verifică pagina mea →

Toate constatările și cum funcționează scorul