Amazonbot
Amazonbot არის Amazon-ის კრაულერი მისი პროდუქტებისა და სერვისების გასაუმჯობესებლად, და Amazon-ის თქმით, მისი მონაცემები შეიძლება Amazon-ის AI მოდელების სასწავლებლად იქნას გამოყენებული. ის robots.txt-ს პატივს სცემს. Amazon ცალკე აგენტებს იყენებს ძიებისთვის, Amzn-SearchBot-ს, და მომხმარებლის მოთხოვნებისთვის, როგორიცაა Alexa-ს მოთხოვნები, Amzn-User-ს, თითოეული საკუთარი ტოკენით.
როგორ დავუშვათ
User-agent: Amazonbot
Allow: / როგორ დავბლოკოთ
User-agent: Amazonbot
Disallow: / რას აკეთებს
Amazon-ის თქმით, Amazonbot გამოიყენება მისი პროდუქტებისა და სერვისების გასაუმჯობესებლად, და მისი მონაცემები შეიძლება Amazon-ის AI მოდელების სასწავლებლად იქნას გამოყენებული. Amazon აცხადებს, რომ მისი ავტომატური დაკრაულვა პატივს სცემს Robots Exclusion Protocol-ს, მათ შორის user-agent-ისა და allow ან disallow წესებს.
Amazon robots.txt-ს 30 დღემდე აქეშებს და Crawl-delay-ს მხარს არ უჭერს. Amazonbot-ის დაბლოკვა არ ფარავს Amzn-SearchBot-ს ან Amzn-User-ს, რომლებსაც საკუთარი ტოკენები აქვთ.
robots.txt ტოკენი
Amazonbot
User-agent სტრიქონი
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36 როგორ გადავამოწმოთ რეალური ვიზიტები
Amazon აქვეყნებს IP მისამართებს, რომლებსაც Amazonbot იყენებს. შეადარეთ მოთხოვნის წყაროს IP ამ სიას; Amazon reverse DNS შემოწმებას არ აღწერს და კითხვების მქონე გამომცემლებს amazonbot@amazon.com-თან დაკავშირებას სთხოვს.