Amazonbot
Amazonbot, Amazon'un ürün ve hizmetlerini iyileştirmek için kullandığı tarayıcıdır ve Amazon, verilerinin Amazon yapay zekâ modellerini eğitmek için kullanılabileceğini söylüyor. robots.txt'ye uyar. Amazon, arama için Amzn-SearchBot ve Alexa soruları gibi kullanıcı istekleri için Amzn-User adlı ayrı etmenler çalıştırır; her birinin kendi token'ı vardır.
Ne yapar
Amazon, Amazonbot'un ürün ve hizmetlerini iyileştirmek için kullanıldığını ve verilerinin Amazon yapay zekâ modellerini eğitmek için kullanılabileceğini söylüyor. Amazon, otomatik taramasının user-agent ile allow veya disallow kuralları dahil Robots Exclusion Protocol'e uyduğunu belirtiyor.
Amazon robots.txt'yi 30 güne kadar önbelleğe alır ve Crawl-delay'i desteklemez. Amazonbot'u engellemek, kendi token'ları olan Amzn-SearchBot veya Amzn-User'ı kapsamaz.
robots.txt token'ı
Amazonbot
User agent dizesi
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36
Nasıl izin verilir
User-agent: Amazonbot
Allow: /
Nasıl engellenir
User-agent: Amazonbot
Disallow: /
Gerçek ziyaretler nasıl doğrulanır
Amazon, Amazonbot'un kullandığı IP adreslerini yayımlar. Bir isteğin kaynak IP'sini bu listeyle karşılaştırın; Amazon bir ters DNS denetimi belgelemez ve sorusu olan yayıncılardan amazonbot@amazon.com adresiyle iletişime geçmesini ister.