Sem Content-Signal no robots.txt
Seu robots.txt não tem uma linha Content-Signal. Essa linha opcional declara como o seu conteúdo pode ser usado: nos resultados de busca, como entrada para respostas de IA ou para treinamento de IA. Nada quebra sem ela. Adicione uma se quiser deixar a sua política de uso registrada em formato legível por máquina.
O que significa
Uma linha Content-Signal informa como seu conteúdo pode ser usado (busca, respostas de IA, treinamento). É opcional; adicione-a se quiser deixar a política explícita.
Por que isso importa para a busca com IA
O robots.txt só diz se um crawler pode buscar uma página, não o que pode ser feito com o conteúdo depois. O Content-Signal, introduzido na Content Signals Policy da Cloudflare, acrescenta três chaves: search, ai-input (usar o conteúdo para responder a uma pergunta em tempo real) e ai-train.
Os crawlers não são obrigados a respeitá-lo, então o AISeeWhy o classifica como P3. Ainda assim, é um jeito claro de separar “você pode usar isto em respostas” de “não treine com isto” quando você libera um crawler que pode fazer as duas coisas, e documenta a sua política para quem ler o arquivo.
Como corrigir
- Defina a sua política para cada um de
search,ai-inputeai-train. - Adicione uma linha
Content-Signaldentro do grupoUser-agent: *do robots.txt, ao lado das regras Allow e Disallow. - Se o seu site está na Cloudflare, confira se o robots.txt gerenciado dela já não adiciona esses sinais, para não declará-los duas vezes.
- Mantenha as regras Allow e Disallow como estão: o Content-Signal não as substitui. O relatório do AISeeWhy mostra as evidências e uma correção pronta para colar; depois execute “Verificar de novo” para confirmar o resultado.
Exemplo
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Allow: /Como confirmar a correção
Depois da mudança, clique em “Verificar de novo” no relatório: ele mostra o que foi corrigido e como a nota mudou.