Amazonbot

Amazon · Treniranje AI-ja

Amazonbot je Amazonov crawler za poboljšanje njegovih proizvoda i usluga, a Amazon navodi da se njegovi podaci mogu koristiti za treniranje Amazonovih AI modela. Poštuje robots.txt. Amazon ima zasebne agente za pretraživanje, Amzn-SearchBot, i za zahtjeve korisnika poput upita Alexi, Amzn-User, svaki s vlastitim tokenom.

Kako ga dopustiti

User-agent: Amazonbot
Allow: /

Kako ga blokirati

User-agent: Amazonbot
Disallow: /

Što radi

Amazon navodi da se Amazonbot koristi za poboljšanje njegovih proizvoda i usluga te da se njegovi podaci mogu koristiti za treniranje Amazonovih AI modela. Amazon navodi da njegovo automatsko pretraživanje poštuje Robots Exclusion Protocol, uključujući user-agent i pravila allow ili disallow.

Amazon sprema robots.txt u predmemoriju do 30 dana i ne podržava Crawl-delay. Blokiranje Amazonbota ne obuhvaća Amzn-SearchBot ni Amzn-User, koji imaju vlastite tokene.

Token za robots.txt

Amazonbot

Niz user agenta

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36

Kako provjeriti stvarne posjete

Amazon objavljuje IP adrese koje Amazonbot koristi. Usporedite izvornu IP adresu zahtjeva s tim popisom; Amazon ne dokumentira provjeru obrnutim DNS-om i moli izdavače s pitanjima da se obrate na amazonbot@amazon.com.

Provjerite propušta li ga vaša web-stranica →