GPTBot

OpenAI · AI სწავლება

GPTBot არის OpenAI-ის კრაულერი კონტენტისთვის, რომელიც შეიძლება გამოყენებულ იქნას მისი გენერაციული AI საბაზისო მოდელების სასწავლებლად. robots.txt-ში მისი აკრძალვა OpenAI-ს ეუბნება, რომ თქვენი კონტენტი სწავლებისთვის არ გამოიყენოს. მისი დაბლოკვა არ გამოგრიცხავთ ChatGPT-ის საძიებო პასუხებიდან, რომლებიც OAI-SearchBot-ზეა დამოკიდებული.

როგორ დავუშვათ

User-agent: GPTBot
Allow: /

როგორ დავბლოკოთ

User-agent: GPTBot
Disallow: /

რას აკეთებს

OpenAI-ის თქმით, GPTBot გამოიყენება მისი გენერაციული AI საბაზისო მოდელების უფრო სასარგებლოდ და უსაფრთხოდ გასახდომად. ის აკრაულებს კონტენტს, რომელიც შეიძლება ამ მოდელების სწავლებაში იქნას გამოყენებული, ხოლო GPTBot-ის აკრძალვა მიუთითებს, რომ საიტის კონტენტი სწავლებაში არ უნდა იქნას გამოყენებული.

მისი დაშვება პოლიტიკის გადაწყვეტილებაა და არა ხილვადობის. ChatGPT-ის ძიება ცალკე კრაულერს, OAI-SearchBot-ს იყენებს, და OpenAI ამ ორ პარამეტრს დამოუკიდებლად აღწერს. როცა ორივე დაშვებულია, OpenAI-ის თქმით, მას შეუძლია ერთი დაკრაულვის შედეგები ორივე მიზნისთვის გამოიყენოს, რომ ორჯერ არ დააკრაულოს.

ჩვენს 2026-11-ის კვლევაში robots.txt-ის მქონე პოპულარული საიტების 21.4% მას ბლოკავდა. →

robots.txt ტოკენი

GPTBot

User-agent სტრიქონი

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbot

როგორ გადავამოწმოთ რეალური ვიზიტები

OpenAI ამ აგენტის მიერ გამოყენებულ IP დიაპაზონებს JSON ფაილად აქვეყნებს. შეადარეთ მოთხოვნის წყაროს IP ამ დიაპაზონებს; მოთხოვნა, რომელიც თავს GPTBot-ს უწოდებს, მაგრამ სხვა მისამართიდან მოდის, OpenAI-სგან არ არის. OpenAI აღნიშნავს, რომ user agent-ში ვერსიის ნომერი შეიძლება შეიცვალოს, ამიტომ შეადარეთ GPTBot ტოკენი და არა სრული სტრიქონი.

შეამოწმეთ, უშვებს თუ არა მას თქვენი საიტი →

OpenAI-ის კრაულერები: GPTBot, OAI-SearchBot და ChatGPT-User →