Amazonbot
Amazonbot — Amazonʼning oʻz mahsulot va xizmatlarini yaxshilash uchun krauleri, Amazon esa uning maʼlumotlaridan Amazon AI modellarini oʻqitishda foydalanilishi mumkinligini aytadi. U robots.txt ni hurmat qiladi. Amazon qidiruv uchun — Amzn-SearchBot va Alexa soʻrovlari kabi foydalanuvchi soʻrovlari uchun — Amzn-User kabi alohida agentlarni ishlatadi, ularning har biri oʻz tokeniga ega.
Unga qanday ruxsat berish mumkin
User-agent: Amazonbot
Allow: / Uni qanday bloklash mumkin
User-agent: Amazonbot
Disallow: / U nima qiladi
Amazon aytishicha, Amazonbot uning mahsulot va xizmatlarini yaxshilash uchun ishlatiladi va uning maʼlumotlaridan Amazon AI modellarini oʻqitishda foydalanilishi mumkin. Amazon oʻzining avtomatik skanerlashi Robots Exclusion Protocol ga, jumladan user-agent va allow yoki disallow qoidalariga amal qilishini bildiradi.
Amazon robots.txt ni 30 kungacha keshlaydi va Crawl-delay ni qoʻllab-quvvatlamaydi. Amazonbotʼni bloklash oʻz tokenlariga ega Amzn-SearchBot yoki Amzn-User ni qamrab olmaydi.
robots.txt tokeni
Amazonbot
User-agent satri
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36 Haqiqiy tashriflarni qanday tasdiqlash mumkin
Amazon Amazonbot foydalanadigan IP manzillarni eʼlon qiladi. Soʻrovning manba IPʼsini shu roʻyxat bilan solishtiring; Amazon reverse DNS tekshiruvini hujjatlashtirmaydi va savollari boʻlgan nashriyotchilardan amazonbot@amazon.com manziliga murojaat qilishni soʻraydi.