OAI-SearchBot

OpenAI · جستجوی هوش مصنوعی

OAI-SearchBot خزنده جستجوی OpenAI است. وب‌سایت‌ها را در قابلیت‌های جستجوی ChatGPT نمایش می‌دهد. OpenAI می‌گوید سایت‌هایی که از OAI-SearchBot انصراف می‌دهند در پاسخ‌های جستجوی ChatGPT نشان داده نمی‌شوند، هرچند همچنان ممکن است به‌صورت لینک‌های ناوبری ظاهر شوند. اگر می‌خواهید ChatGPT به صفحه‌های شما استناد کند، به آن اجازه دهید.

چطور به آن اجازه دهید

User-agent: OAI-SearchBot
Allow: /

چطور آن را مسدود کنید

User-agent: OAI-SearchBot
Disallow: /

چه کاری می‌کند

OpenAI از OAI-SearchBot برای نمایش وب‌سایت‌ها در نتایج جستجوی قابلیت‌های جستجوی ChatGPT استفاده می‌کند. این خزنده آموزشی نیست: آموزش مدل جداگانه از طریق GPTBot کنترل می‌شود.

OpenAI می‌گوید سایت‌هایی که از OAI-SearchBot انصراف داده‌اند در پاسخ‌های جستجوی ChatGPT نشان داده نمی‌شوند، هرچند همچنان ممکن است به‌صورت لینک‌های ناوبری ظاهر شوند. پس از به‌روزرسانی robots.txt ممکن است حدود 24 ساعت طول بکشد تا سیستم‌های OpenAI خود را تنظیم کنند.

در پژوهش 2026-11 ما، 11.2% از سایت‌های پربازدیدی که robots.txt داشتند آن را مسدود کرده بودند. ←

توکن robots.txt

OAI-SearchBot

رشته user agent

Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot

چطور بازدیدهای واقعی را تأیید کنید

OpenAI محدوده‌های IP مورد استفاده این عامل را به‌صورت یک فایل JSON منتشر می‌کند. IP مبدأ درخواست را با این محدوده‌ها مقایسه کنید؛ درخواستی که نام OAI-SearchBot را دارد اما از نشانی دیگری می‌آید از طرف OpenAI نیست. OpenAI یادآوری می‌کند که شماره نسخه در user agent ممکن است تغییر کند، پس به‌جای کل رشته، توکن OAI-SearchBot را تطبیق دهید.

بررسی کنید که آیا سایت شما به آن اجازه ورود می‌دهد ←

خزنده‌های OpenAI به زبان ساده: GPTBot، OAI-SearchBot و ChatGPT-User ←