OAI-SearchBot
OAI-SearchBot হলো OpenAI-এর সার্চ ক্রলার। এটি ChatGPT-এর সার্চ ফিচারে ওয়েবসাইট তুলে ধরে। OpenAI জানায়, যে সাইটগুলো OAI-SearchBot থেকে অপ্ট আউট করে সেগুলো ChatGPT সার্চের উত্তরে দেখানো হবে না, যদিও নেভিগেশনাল লিংক হিসেবে আসতে পারে। ChatGPT আপনার পেজ উদ্ধৃত করুক চাইলে এটিকে অনুমতি দিন।
কীভাবে অনুমতি দেবেন
User-agent: OAI-SearchBot
Allow: / কীভাবে ব্লক করবেন
User-agent: OAI-SearchBot
Disallow: / এটি কী করে
OpenAI ChatGPT-এর সার্চ ফিচারের ফলাফলে ওয়েবসাইট তুলে ধরতে OAI-SearchBot ব্যবহার করে। এটি ট্রেনিং ক্রলার নয়: মডেল ট্রেনিং আলাদাভাবে GPTBot দিয়ে নিয়ন্ত্রিত হয়।
OpenAI জানায়, OAI-SearchBot থেকে অপ্ট আউট করা সাইট ChatGPT সার্চের উত্তরে দেখানো হবে না, যদিও নেভিগেশনাল লিংক হিসেবে আসতে পারে। robots.txt হালনাগাদের পরে OpenAI-এর সিস্টেমে তা প্রতিফলিত হতে প্রায় 24 ঘণ্টা লাগতে পারে।
আমাদের 2026-11-এর গবেষণায় robots.txt থাকা জনপ্রিয় সাইটগুলোর 11.2% এটি ব্লক করেছে। →
robots.txt টোকেন
OAI-SearchBot
ইউজার-এজেন্ট স্ট্রিং
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot আসল ভিজিট কীভাবে যাচাই করবেন
OpenAI এই এজেন্টের ব্যবহৃত IP রেঞ্জ একটি JSON ফাইল হিসেবে প্রকাশ করে। অনুরোধের উৎস IP সেই রেঞ্জগুলোর সঙ্গে মিলিয়ে দেখুন; যে অনুরোধ নিজেকে OAI-SearchBot বলে কিন্তু অন্য ঠিকানা থেকে আসে, তা OpenAI থেকে নয়। OpenAI জানায় ইউজার এজেন্টের সংস্করণ নম্বর বদলাতে পারে, তাই পুরো স্ট্রিং নয়, OAI-SearchBot টোকেনটি মিলিয়ে দেখুন।