2 páginas recusaram o rastreamento
Estas páginas responderam 401, 403, 429 ou 503, ou esgotaram o tempo, quando a auditoria as buscou como um navegador. Muitas vezes é um firewall, uma proteção contra bots ou um limite de taxa, e não uma página quebrada. Confira se os crawlers de busca e de IA recebem a mesma resposta.
O que significa
Essas páginas responderam 401, 403, 429 ou 503, ou excederam o tempo limite. Um firewall ou limite de taxa pode estar barrando os rastreadores também. Verifique se os rastreadores de busca e de IA recebem a mesma resposta.
Por que isso importa para a busca com IA
A auditoria busca muitas páginas em pouco tempo a partir de um único servidor, então um limite de taxa pode responder 429 ou 503 mesmo quando as pessoas conseguem abrir a página. Se a mesma regra vale para crawlers de busca e de IA, estas páginas não são buscadas para os índices deles e não podem ser citadas em respostas de IA.
Um 401 significa que a página exige login, o que é esperado em áreas de conta, mas não em conteúdo público. Um 503 em todas as páginas pode indicar que o modo de manutenção ficou ligado. Estas páginas ficam separadas dos links quebrados porque a correção depende de quem está sendo recusado.
Como corrigir
- Abra algumas das URLs listadas em uma janela anônima do navegador. Se elas carregarem, o bloqueio é voltado para requisições automatizadas.
- Procure as requisições recusadas nos logs do firewall, da CDN ou da hospedagem. Garanta que crawlers de busca verificados, como Googlebot e Bingbot, e os crawlers de busca com IA que você quer estejam liberados; muitas CDNs, entre elas a Cloudflare, têm uma configuração para bots verificados.
- Se a causa foi um limite de taxa, aumente o limite para requisições normais de páginas ou deixe as páginas HTML de fora dele.
- Se as páginas respondem 401, tire o login das páginas públicas ou pare de criar links de páginas públicas para páginas privadas.
- Execute a auditoria do site de novo pela sua conta para confirmar o resultado.
Como confirmar a correção
Depois da mudança, clique em “Verificar de novo” no relatório: ele mostra o que foi corrigido e como a nota mudou.