GPTBot
O GPTBot é o crawler da OpenAI para conteúdo que pode ser usado no treinamento de seus modelos de base de IA generativa. Proibi-lo no robots.txt avisa à OpenAI que ela não deve usar seu conteúdo para treinamento. Bloqueá-lo não tira você das respostas da busca do ChatGPT, que dependem do OAI-SearchBot.
O que ele faz
A OpenAI diz que o GPTBot é usado para tornar seus modelos de base de IA generativa mais úteis e seguros. Ele rastreia conteúdo que pode ser usado no treinamento desses modelos, e proibir o GPTBot indica que o conteúdo de um site não deve ser usado no treinamento.
Permitir ou não é uma decisão de política, não de visibilidade. A busca do ChatGPT usa um crawler separado, o OAI-SearchBot, e a OpenAI documenta as duas configurações como independentes. Quando ambos estão permitidos, a OpenAI diz que pode usar o resultado de um rastreamento para as duas finalidades, para não rastrear duas vezes.
No nosso estudo de 2026-11, 21.4% dos sites populares com robots.txt o bloqueavam. →
Token do robots.txt
GPTBot
String de user agent
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbotComo permitir
User-agent: GPTBot
Allow: /Como bloquear
User-agent: GPTBot
Disallow: /Como verificar visitas reais
A OpenAI publica as faixas de IP que esse agente usa como um arquivo JSON. Compare o IP de origem da requisição com essas faixas; uma requisição que cita GPTBot, mas vem de outro endereço, não é da OpenAI. A OpenAI observa que o número da versão no user agent pode mudar, então compare o token GPTBot, e não a string inteira.
Veja se seu site deixa ele entrar →
Crawlers da OpenAI explicados: GPTBot, OAI-SearchBot e ChatGPT-User →