Crawlers de IA e AEO, explicados
Guias práticos para donos de site, profissionais de marketing e desenvolvedores: quais crawlers de IA existem, o que eles podem ler e como garantir que as respostas de IA consigam ler e citar suas páginas.
O ChatGPT consegue ver meu site? Como verificar
Como verificar se o ChatGPT consegue ler e citar seu site: OAI-SearchBot, GPTBot e ChatGPT-User, robots.txt, firewalls e um teste rápido com curl.
Ler artigo →Crawlers da OpenAICrawlers da OpenAI explicados: GPTBot, OAI-SearchBot e ChatGPT-User
O que fazem os três crawlers da OpenAI, qual token do robots.txt controla o quê e o que muda no seu site ao bloquear GPTBot, OAI-SearchBot ou ChatGPT-User.
Ler artigo →Firewalls e CDNsA Cloudflare está bloqueando crawlers de IA? Como descobrir e corrigir
Por que a Cloudflare e outros WAFs respondem a crawlers de IA com 403 ou páginas de desafio, como identificar isso e liberar crawlers de busca com segurança.
Ler artigo →robots.txtrobots.txt para crawlers de IA: o que liberar e o que bloquear
Como escrever o robots.txt para crawlers de IA: liberar a busca com IA, decidir sobre o treinamento, o token de cada crawler, regras da RFC 9309 e erros comuns.
Ler artigo →llms.txtO que é o llms.txt e vale a pena adicionar?
llms.txt explicado: o que é a proposta, seu formato Markdown, quem o lê hoje e como escrever um em dez minutos, com um olhar honesto sobre a adoção.
Ler artigo →Noções básicas de AEOAEO x SEO: o que é igual e o que muda para as respostas de IA
AEO comparado ao SEO: o que continua igual, o que muda para as respostas de IA (acesso, resposta primeiro, entidades, atualização) e um checklist.
Ler artigo →Crawlers do ClaudeCrawlers da Anthropic: ClaudeBot, Claude-SearchBot e Claude-User
Os três agentes web da Anthropic: o que fazem ClaudeBot, Claude-SearchBot e Claude-User, seus tokens de robots.txt e o que muda ao bloquear cada um.
Ler artigo →Crawlers da PerplexityCrawlers da Perplexity: PerplexityBot e Perplexity-User
Os dois agentes da Perplexity: o que fazem PerplexityBot e Perplexity-User, qual deles o robots.txt controla e como liberá-los ou bloqueá-los no firewall.
Ler artigo →Dados estruturadosDados estruturados para respostas de IA: o que marcar e como
Quais marcações schema.org ajudam as respostas de IA a ler sua página: Organization com sameAs, Article com data e autor, FAQPage e Product com preço.
Ler artigo →Renderização em JavaScriptOs crawlers de IA conseguem ler conteúdo renderizado por JavaScript?
Por que o conteúdo renderizado só por JavaScript costuma faltar para crawlers de IA, como verificar o que eles recebem e como corrigir com SSR ou HTML estático.
Ler artigo →