GPTBot

OpenAI · AI-træning

GPTBot er OpenAIs crawler til indhold, der kan bruges til at træne virksomhedens generative AI-fundamentmodeller. Hvis du forbyder den i robots.txt, fortæller du OpenAI, at dit indhold ikke må bruges til træning. Du fjernes ikke fra svarene i ChatGPT-søgning, for de afhænger af OAI-SearchBot.

Hvad den gør

OpenAI siger, at GPTBot bruges til at gøre virksomhedens generative AI-fundamentmodeller mere nyttige og sikre. Den henter indhold, der kan bruges til at træne disse modeller, og at forbyde GPTBot angiver, at et websites indhold ikke skal bruges til træning.

Om du skal tillade den, er et spørgsmål om politik og ikke om synlighed. ChatGPT-søgning bruger en separat crawler, OAI-SearchBot, og OpenAI dokumenterer de to indstillinger som uafhængige. Når begge er tilladt, kan OpenAI ifølge sig selv bruge resultatet af én gennemgang til begge formål for at undgå at gennemgå siden to gange.

I vores undersøgelse fra 2026-11 blokerede 21.4% af populære websites med en robots.txt den. →

robots.txt-token

GPTBot

User agent-streng

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbot

Sådan tillader du den

User-agent: GPTBot
Allow: /

Sådan blokerer du den

User-agent: GPTBot
Disallow: /

Sådan verificerer du ægte besøg

OpenAI offentliggør de IP-intervaller, denne agent bruger, som en JSON-fil. Sammenlign forespørgslens kilde-IP med disse intervaller; en forespørgsel, der angiver GPTBot, men kommer fra en anden adresse, stammer ikke fra OpenAI. OpenAI bemærker, at versionsnummeret i user agent kan ændre sig, så match tokenet GPTBot og ikke hele strengen.

Tjek, om dit website lukker den ind →

OpenAI's crawlere forklaret: GPTBot, OAI-SearchBot og ChatGPT-User →