GPTBot
GPTBot yra OpenAI robotas, renkantis turinį, kuris gali būti naudojamas jos generatyvinio DI bazinių modelių mokymui. Uždraudę jį robots.txt, nurodote OpenAI nenaudoti jūsų turinio mokymui. Jo blokavimas nepašalina jūsų iš ChatGPT paieškos atsakymų, kurie priklauso nuo OAI-SearchBot.
Kaip jį įleisti
User-agent: GPTBot
Allow: / Kaip jį blokuoti
User-agent: GPTBot
Disallow: / Ką jis daro
OpenAI teigia, kad GPTBot naudojamas tam, kad jos generatyvinio DI baziniai modeliai būtų naudingesni ir saugesni. Jis renka turinį, kuris gali būti naudojamas tiems modeliams mokyti, o GPTBot uždraudimas nurodo, kad svetainės turinys neturi būti naudojamas mokymui.
Ar jį įleisti, yra politikos, o ne matomumo sprendimas. ChatGPT paieška naudoja atskirą robotą OAI-SearchBot, o OpenAI šiuos du nustatymus dokumentuoja kaip nepriklausomus. Kai leidžiami abu, OpenAI teigia, kad gali vieno nuskaitymo rezultatus naudoti abiem tikslams, kad nereikėtų nuskaityti du kartus.
Mūsų 2026-11 tyrime jį blokavo 21.4% populiarių svetainių, turinčių robots.txt. →
robots.txt žymuo
GPTBot
User-agent eilutė
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbot Kaip patvirtinti tikrus apsilankymus
OpenAI skelbia šio agento naudojamus IP intervalus JSON failu. Palyginkite užklausos šaltinio IP su tais intervalais; užklausa, kuri vadinasi GPTBot, bet ateina iš kito adreso, nėra iš OpenAI. OpenAI pažymi, kad versijos numeris user agent gali keistis, todėl tikrinkite žymenį GPTBot, o ne visą eilutę.