2 pagine hanno rifiutato la scansione
Queste pagine hanno risposto 401, 403, 429 o 503, o sono andate in timeout, quando l'audit le ha scaricate come un browser. Spesso si tratta di un firewall, una protezione dai bot o un limite di frequenza, non di una pagina rotta. Verifica se i crawler di ricerca e AI ricevono la stessa risposta.
Cosa significa
Queste pagine hanno risposto 401, 403, 429 o 503, oppure sono andate in timeout. Un firewall o un limite di frequenza potrebbe bloccare anche i crawler. Controlla se i crawler dei motori di ricerca e dell'IA ricevono la stessa risposta.
Perché conta per la ricerca AI
L'audit scarica molte pagine in poco tempo da un solo server, quindi un limite di frequenza può rispondere 429 o 503 anche quando le persone vedono la pagina. Se la stessa regola vale per i crawler di ricerca e AI, queste pagine non vengono scaricate per i loro indici e non possono essere citate nelle risposte AI.
Un 401 significa che la pagina richiede un login, il che è normale per le aree account ma non per i contenuti pubblici. Un 503 su ogni pagina può voler dire che la modalità manutenzione è rimasta attiva. Queste pagine sono tenute separate dai link rotti perché la correzione dipende da chi viene rifiutato.
Come risolvere
- Apri alcuni degli URL elencati in una finestra privata del browser. Se si caricano, il blocco è rivolto alle richieste automatiche.
- Cerca le richieste rifiutate nei log del firewall, del CDN o dell'hosting. Assicurati che i crawler di ricerca verificati come Googlebot e Bingbot, e i crawler di ricerca AI che vuoi, siano consentiti; molti CDN, tra cui Cloudflare, hanno un'impostazione per i bot verificati.
- Se la causa è un limite di frequenza, alzalo per le normali richieste di pagina o escludi le pagine HTML.
- Se le pagine rispondono 401, togli il login dalle pagine pubbliche, o smetti di linkare pagine private da quelle pubbliche.
- Esegui di nuovo l'audit del sito dal tuo account per confermare il risultato.
Come confermare la correzione
Dopo la modifica, premi «Ricontrolla» nel report: mostra cosa è stato risolto e come è cambiato il punteggio.