Applebot-Extended
Applebot-Extended একটি robots.txt টোকেন, ক্রলার নয়। এটি নিষিদ্ধ করলে Apple-কে জানানো হয় Applebot-এর ক্রল করা কনটেন্ট তার জেনারেটিভ ফাউন্ডেশন মডেলের ট্রেনিংয়ে ব্যবহার না করতে। Apple জানায় যে পেজগুলো এটি নিষিদ্ধ করে সেগুলোও Apple-এর সার্চের ফলাফলে আসতে পারে, তাই এটি ব্লক করলে Siri বা Spotlight-এ দৃশ্যমানতা প্রভাবিত হয় না।
কীভাবে অনুমতি দেবেন
User-agent: Applebot-Extended
Allow: / কীভাবে ব্লক করবেন
User-agent: Applebot-Extended
Disallow: / এটি কী করে
Apple জানায়, Applebot-Extended ওয়েবপেজ ক্রল করে না। এটি শুধু Applebot-এর ক্রল করা ডেটা কীভাবে ব্যবহার করা যাবে তা ঠিক করতে ব্যবহৃত হয়। এটি নিষিদ্ধ করলে আপনার কনটেন্ট Apple Intelligence-এর মতো জেনারেটিভ AI ফিচার চালানো Apple-এর ফাউন্ডেশন মডেলের ট্রেনিং থেকে বাদ যায়।
যে পেজগুলো Applebot-Extended নিষিদ্ধ করে সেগুলোও সার্চের ফলাফলে থাকতে পারে, এবং Apple জানায় সার্চ র্যাংকিংয়ে এই রুল বিবেচনা করা হয় না। ক্রলিং নিজে Applebot টোকেন দিয়ে নিয়ন্ত্রিত হয়।
আমাদের 2026-11-এর গবেষণায় robots.txt থাকা জনপ্রিয় সাইটগুলোর 18.0% এটি ব্লক করেছে। →
robots.txt টোকেন
Applebot-Extended
আসল ভিজিট কীভাবে যাচাই করবেন
আপনার লগে যাচাই করার মতো কিছু নেই: Applebot-Extended কখনো ইউজার এজেন্ট হিসেবে দেখা যায় না। মূল অনুরোধগুলো আসে Applebot থেকে, যা আপনি reverse DNS (applebot.apple.com) দিয়ে বা Apple-এর প্রকাশিত IP রেঞ্জের সঙ্গে মিলিয়ে যাচাই করতে পারেন।
আপনার সাইট এটিকে ঢুকতে দেয় কি না চেক করুন →
AI ক্রলারের জন্য robots.txt: কী অনুমতি দেবেন, কী ব্লক করবেন →