GPTBot
GPTBot ialah perangkak OpenAI untuk kandungan yang mungkin digunakan bagi melatih model asas AI generatifnya. Melarangnya dalam robots.txt memberitahu OpenAI supaya tidak menggunakan kandungan anda untuk latihan. Menyekatnya tidak mengeluarkan anda daripada jawapan carian ChatGPT, yang bergantung pada OAI-SearchBot.
Fungsinya
OpenAI menyatakan GPTBot digunakan untuk menjadikan model asas AI generatifnya lebih berguna dan selamat. Ia merangkak kandungan yang mungkin digunakan dalam melatih model tersebut, dan melarang GPTBot menandakan bahawa kandungan sesuatu laman tidak patut digunakan dalam latihan.
Sama ada hendak membenarkannya ialah keputusan dasar, bukan soal keterlihatan. Carian ChatGPT menggunakan perangkak berasingan, OAI-SearchBot, dan OpenAI mendokumenkan kedua-dua tetapan itu sebagai bebas. Apabila kedua-duanya dibenarkan, OpenAI menyatakan ia mungkin menggunakan hasil satu rangkakan untuk kedua-dua tujuan bagi mengelakkan merangkak dua kali.
Dalam kajian 2026-11 kami, 21.4% laman popular yang mempunyai robots.txt telah menyekatnya. →
Token robots.txt
GPTBot
Rentetan user agent
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbotCara membenarkannya
User-agent: GPTBot
Allow: /Cara menyekatnya
User-agent: GPTBot
Disallow: /Cara mengesahkan lawatan sebenar
OpenAI menerbitkan julat IP yang digunakan ejen ini sebagai fail JSON. Padankan IP sumber permintaan dengan julat tersebut; permintaan yang menamakan GPTBot tetapi datang dari alamat lain bukan daripada OpenAI. OpenAI menyatakan nombor versi dalam user agent mungkin berubah, jadi padankan token GPTBot dan bukannya rentetan penuh.
Semak sama ada laman anda membenarkannya masuk →
Crawler OpenAI diterangkan: GPTBot, OAI-SearchBot dan ChatGPT-User →