OAI-SearchBot
OAI-SearchBot adalah crawler pencarian OpenAI. Bot ini menampilkan situs web di fitur pencarian ChatGPT. OpenAI menyatakan situs yang memilih keluar dari OAI-SearchBot tidak akan ditampilkan dalam jawaban pencarian ChatGPT, meski masih dapat muncul sebagai tautan navigasi. Jika Anda ingin ChatGPT mengutip halaman Anda, izinkan bot ini.
Fungsinya
OpenAI memakai OAI-SearchBot untuk menampilkan situs web di hasil pencarian pada fitur pencarian ChatGPT. Bot ini bukan crawler pelatihan: pelatihan model dikendalikan terpisah melalui GPTBot.
OpenAI menyatakan situs yang memilih keluar dari OAI-SearchBot tidak akan ditampilkan dalam jawaban pencarian ChatGPT, meski masih dapat muncul sebagai tautan navigasi. Sistem OpenAI dapat memerlukan sekitar 24 jam setelah pembaruan robots.txt untuk menyesuaikan diri.
Dalam studi kami pada 2026-11, 11.2% situs populer yang memiliki robots.txt memblokirnya. →
Token robots.txt
OAI-SearchBot
String user agent
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot
Cara mengizinkannya
User-agent: OAI-SearchBot
Allow: /
Cara memblokirnya
User-agent: OAI-SearchBot
Disallow: /
Cara memverifikasi kunjungan asli
OpenAI mempublikasikan rentang IP yang digunakan agen ini sebagai file JSON. Cocokkan IP sumber permintaan dengan rentang tersebut; permintaan yang menyebut OAI-SearchBot tetapi berasal dari alamat lain bukan berasal dari OpenAI. OpenAI mencatat bahwa nomor versi di user agent dapat berubah, jadi cocokkan token OAI-SearchBot, bukan string lengkapnya.
Periksa apakah situs Anda mengizinkannya →
Crawler OpenAI dijelaskan: GPTBot, OAI-SearchBot, dan ChatGPT-User →