meta-externalagent

Meta · AI ট্রেনিং

Meta-ExternalAgent হলো Meta-র ক্রলার, যা ফাউন্ডেশন AI মডেলের ট্রেনিং এবং সরাসরি কনটেন্ট ইনডেক্স করে প্রোডাক্ট উন্নত করার মতো কাজে ব্যবহৃত হয়। Meta জানায় robots.txt-এ disallow দিয়ে এটি ব্লক করা যায়। Meta AI সার্চ একটি ভিন্ন ক্রলার, meta-webindexer, ব্যবহার করে, যা এই রুলের আওতায় পড়ে না।

কীভাবে অনুমতি দেবেন

User-agent: meta-externalagent
Allow: /

কীভাবে ব্লক করবেন

User-agent: meta-externalagent
Disallow: /

এটি কী করে

Meta জানায়, Meta-ExternalAgent ক্রলার ফাউন্ডেশন AI মডেলের ট্রেনিং বা সরাসরি কনটেন্ট ইনডেক্স করে প্রোডাক্ট উন্নত করার মতো কাজের জন্য ওয়েব ক্রল করে। Meta robots.txt-এ meta-externalagent-এর জন্য একটি disallow রুল যোগ করে এটি ব্লক করার উপায় বর্ণনা করে।

এটি meta-webindexer থেকে আলাদা, যা Meta AI সার্চের ফলাফল উন্নত করতে Meta ব্যবহার করে, এবং Meta-ExternalFetcher থেকেও আলাদা, যা ব্যবহারকারীর অনুরোধে লিংক আনে।

আমাদের 2026-11-এর গবেষণায় robots.txt থাকা জনপ্রিয় সাইটগুলোর 19.5% এটি ব্লক করেছে। →

robots.txt টোকেন

meta-externalagent

ইউজার-এজেন্ট স্ট্রিং

meta-externalagent/1.1

আসল ভিজিট কীভাবে যাচাই করবেন

Meta তার ক্রলার ডকুমেন্টেশনে এই ক্রলারের জন্য কোনো IP রেঞ্জ বা reverse DNS পদ্ধতি প্রকাশ করে না, তাই শুধু ইউজার এজেন্ট মিললেই প্রমাণ হয় না যে অনুরোধটি আসল। Meta তার ক্রলার নিয়ে প্রশ্ন webmasters@meta.com-এ পাঠাতে বলে।

আপনার সাইট এটিকে ঢুকতে দেয় কি না চেক করুন →

AI ক্রলারের জন্য robots.txt: কী অনুমতি দেবেন, কী ব্লক করবেন →