Amazonbot
Amazonbot on Amazonin robotti sen tuotteiden ja palvelujen parantamiseen, ja Amazon kertoo, että sen dataa voidaan käyttää Amazonin tekoälymallien kouluttamiseen. Se noudattaa robots.txt-tiedostoa. Amazon ylläpitää erillisiä agentteja hakua varten, Amzn-SearchBot, ja käyttäjien pyyntöjä varten, kuten Alexa-kyselyt, Amzn-User, kummallakin oma tunnuksensa.
Mitä se tekee
Amazon kertoo, että Amazonbotia käytetään sen tuotteiden ja palvelujen parantamiseen ja että sen dataa voidaan käyttää Amazonin tekoälymallien kouluttamiseen. Amazon toteaa, että sen automaattinen läpikäynti noudattaa robottien poissulkemisprotokollaa, mukaan lukien user agent -säännöt sekä allow- ja disallow-säännöt.
Amazon pitää robots.txt-tiedostoa välimuistissa jopa 30 päivää eikä tue Crawl-delay-direktiiviä. Amazonbotin estäminen ei kata Amzn-SearchBotia eikä Amzn-Useria, joilla on omat tunnuksensa.
robots.txt-tunnus
Amazonbot
User agent -merkkijono
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36
Miten sen sallii
User-agent: Amazonbot
Allow: /
Miten sen estää
User-agent: Amazonbot
Disallow: /
Miten aidot käynnit varmistetaan
Amazon julkaisee Amazonbotin käyttämät IP-osoitteet. Vertaa pyynnön lähde-IP:tä tähän luetteloon; Amazon ei dokumentoi käänteistä DNS-tarkistusta ja pyytää kysymyksiä esittäviä julkaisijoita ottamaan yhteyttä osoitteeseen amazonbot@amazon.com.