GPTBot

OpenAI · Обука на AI

GPTBot е краулерот на OpenAI за содржина што може да се користи за обука на неговите генеративни AI основни модели. Забраната во robots.txt му кажува на OpenAI да не ја користи вашата содржина за обука. Блокирањето не ве отстранува од одговорите на ChatGPT пребарувањето, кои зависат од OAI-SearchBot.

Како да се дозволи

User-agent: GPTBot
Allow: /

Како да се блокира

User-agent: GPTBot
Disallow: /

Што прави

OpenAI вели дека GPTBot се користи за да ги направи неговите генеративни AI основни модели покорисни и побезбедни. Обиколува содржина што може да се користи при обуката на тие модели, а забраната на GPTBot означува дека содржината на сајтот не треба да се користи за обука.

Дали да го дозволите е одлука на политика, а не на видливост. ChatGPT пребарувањето користи посебен краулер, OAI-SearchBot, а OpenAI ги документира двете поставки како независни. Кога се дозволени двата, OpenAI вели дека може да ги користи резултатите од едно обиколување за двете намени, за да не обиколува двапати.

Во нашата студија од 2026-11, 21.4% од популарните сајтови со robots.txt го блокираа. →

Ознака за robots.txt

GPTBot

User-agent низа

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbot

Како да се потврдат вистинските посети

OpenAI ги објавува IP опсезите што ги користи овој агент како JSON датотека. Споредете ја изворната IP адреса на барањето со тие опсези; барање што го именува GPTBot, а доаѓа од друга адреса, не е од OpenAI. OpenAI наведува дека бројот на верзијата во user agent-от може да се промени, па совпаѓајте ја ознаката GPTBot, а не целата низа.

Проверете дали вашиот сајт го пушта →

Краулерите на OpenAI објаснети: GPTBot, OAI-SearchBot и ChatGPT-User →