Amazonbot
Amazonbot হলো Amazon-এর ক্রলার, যা তার প্রোডাক্ট ও সেবা উন্নত করতে ব্যবহৃত হয়, এবং Amazon জানায় এর ডেটা Amazon AI মডেলের ট্রেনিংয়ে ব্যবহার হতে পারে। এটি robots.txt মানে। Amazon সার্চের জন্য Amzn-SearchBot এবং Alexa-র প্রশ্নের মতো ব্যবহারকারীর অনুরোধের জন্য Amzn-User নামে আলাদা এজেন্ট চালায়, প্রতিটির নিজস্ব টোকেনসহ।
কীভাবে অনুমতি দেবেন
User-agent: Amazonbot
Allow: / কীভাবে ব্লক করবেন
User-agent: Amazonbot
Disallow: / এটি কী করে
Amazon জানায়, Amazonbot তার প্রোডাক্ট ও সেবা উন্নত করতে ব্যবহৃত হয়, এবং এর ডেটা Amazon AI মডেলের ট্রেনিংয়ে ব্যবহার হতে পারে। Amazon জানায়, তার স্বয়ংক্রিয় ক্রলিং Robots Exclusion Protocol মানে, ইউজার-এজেন্ট এবং allow বা disallow রুলসহ।
Amazon robots.txt সর্বোচ্চ 30 দিন পর্যন্ত ক্যাশ করে এবং Crawl-delay সমর্থন করে না। Amazonbot ব্লক করলে Amzn-SearchBot বা Amzn-User ব্লক হয় না, কারণ এদের নিজস্ব টোকেন আছে।
robots.txt টোকেন
Amazonbot
ইউজার-এজেন্ট স্ট্রিং
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36 আসল ভিজিট কীভাবে যাচাই করবেন
Amazon Amazonbot-এর ব্যবহৃত IP ঠিকানা প্রকাশ করে। একটি অনুরোধের উৎস IP সেই তালিকার সঙ্গে মিলিয়ে দেখুন; Amazon কোনো reverse DNS যাচাইয়ের কথা বলে না এবং প্রশ্ন থাকলে প্রকাশকদের amazonbot@amazon.com-এ যোগাযোগ করতে বলে।