Amazonbot
Amazonbot yra Amazon robotas, skirtas jos produktams ir paslaugoms tobulinti, o Amazon teigia, kad jo duomenys gali būti naudojami Amazon DI modeliams mokyti. Jis paiso robots.txt. Amazon turi atskirus agentus paieškai, Amzn-SearchBot, ir naudotojų užklausoms, pvz., Alexa klausimams, Amzn-User, kiekvienas su savo žymeniu.
Kaip jį įleisti
User-agent: Amazonbot
Allow: / Kaip jį blokuoti
User-agent: Amazonbot
Disallow: / Ką jis daro
Amazon teigia, kad Amazonbot naudojamas jos produktams ir paslaugoms tobulinti ir kad jo duomenys gali būti naudojami Amazon DI modeliams mokyti. Amazon nurodo, kad jos automatinis nuskaitymas paiso Robots Exclusion Protocol, įskaitant user-agent ir allow ar disallow taisykles.
Amazon saugo robots.txt podėlyje iki 30 dienų ir nepalaiko Crawl-delay. Amazonbot blokavimas neapima Amzn-SearchBot ar Amzn-User, kurie turi savo žymenis.
robots.txt žymuo
Amazonbot
User-agent eilutė
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36 Kaip patvirtinti tikrus apsilankymus
Amazon skelbia IP adresus, kuriuos naudoja Amazonbot. Palyginkite užklausos šaltinio IP su tuo sąrašu; Amazon nedokumentuoja atvirkštinės DNS patikros ir leidėjų su klausimais prašo kreiptis adresu amazonbot@amazon.com.