Nossa sonda foi bloqueada, resultado inconclusivo
Até a requisição normal de navegador da auditoria foi recusada com um status de bloqueio, um erro ou uma página de desafio, então não é possível avaliar o acesso dos crawlers. Isso não significa que os crawlers estão bloqueados. Libere a auditoria por um momento ou rode-a a partir de outra rede e depois compare de novo os resultados dos crawlers.
O que significa
Até a requisição de navegador feita pelo nosso servidor recebeu status 403 ou uma página de desafio, então não é possível avaliar o acesso de bots a partir daqui. Execute a auditoria de outra rede ou libere a auditoria por um instante.
Por que isso importa para a busca com IA
Todo veredito de acesso no AISeeWhy compara a resposta de um crawler com uma requisição de navegador enviada do mesmo servidor. Quando a própria requisição do navegador é bloqueada, não há referência, então a auditoria para aí em vez de relatar bloqueios de crawlers que podem não ser reais.
A causa mais comum é uma proteção contra bots que desafia todo o tráfego vindo de faixas de IP de nuvem e de datacenter, ou um modo que vale para o site todo, como o Under Attack mode da Cloudflare. A mesma regra pode afetar também os crawlers de IA reais, que igualmente buscam páginas de datacenters, então vale conferir como ela os trata.
Como corrigir
- Leia o status e o WAF detectado nas evidências do achado.
- Na Cloudflare, confira Security → Events para ver a requisição bloqueada e qual regra disparou: Under Attack mode, um desafio de JavaScript, um bloqueio por país ou ASN, ou um limite de taxa.
- Relaxe temporariamente a regra que desafia todo visitante, ou libere a auditoria por um instante, e então execute “Verificar de novo”. A requisição do navegador usa um user agent normal do Chrome, então uma exceção só de user agent não vai ajudar.
- Quando a requisição do navegador passar, revise as linhas dos crawlers: elas passam a mostrar se cada crawler está liberado.
Como confirmar a correção
Depois da mudança, clique em “Verificar de novo” no relatório: ele mostra o que foi corrigido e como a nota mudou.