Amazonbot
Amazonbot என்பது தனது தயாரிப்புகளையும் சேவைகளையும் மேம்படுத்த Amazon பயன்படுத்தும் கிராலர்; இதன் தரவு Amazon AI மாதிரிகளைப் பயிற்றுவிக்கப் பயன்படலாம் என்று Amazon சொல்கிறது. இது robots.txt-ஐ மதிக்கிறது. தேடலுக்கு Amzn-SearchBot, Alexa கேள்விகள் போன்ற பயனர் கோரிக்கைகளுக்கு Amzn-User என Amazon தனி ஏஜென்ட்களை இயக்குகிறது; ஒவ்வொன்றுக்கும் சொந்த டோக்கன் உள்ளது.
இதை எப்படி அனுமதிப்பது
User-agent: Amazonbot
Allow: / இதை எப்படித் தடுப்பது
User-agent: Amazonbot
Disallow: / இது என்ன செய்கிறது
Amazonbot தனது தயாரிப்புகளையும் சேவைகளையும் மேம்படுத்தப் பயன்படுகிறது என்றும், இதன் தரவு Amazon AI மாதிரிகளைப் பயிற்றுவிக்கப் பயன்படலாம் என்றும் Amazon சொல்கிறது. தனது தானியங்கி crawl, user-agent மற்றும் allow அல்லது disallow விதிகள் உட்பட Robots Exclusion Protocol-ஐ மதிக்கிறது என்று Amazon கூறுகிறது.
Amazon, robots.txt-ஐ 30 நாட்கள் வரை cache செய்கிறது, Crawl-delay-ஐ ஆதரிப்பதில்லை. Amazonbot-ஐத் தடுப்பது சொந்த டோக்கன்கள் கொண்ட Amzn-SearchBot அல்லது Amzn-User-ஐ உள்ளடக்காது.
robots.txt டோக்கன்
Amazonbot
User-agent சரம்
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36 உண்மையான வருகைகளை எப்படிச் சரிபார்ப்பது
Amazonbot பயன்படுத்தும் IP முகவரிகளை Amazon வெளியிடுகிறது. ஒரு கோரிக்கையின் மூல IP-ஐ அந்தப் பட்டியலுடன் ஒப்பிடுங்கள்; Amazon, reverse DNS சரிபார்ப்பை ஆவணப்படுத்தவில்லை; கேள்விகள் உள்ள வெளியீட்டாளர்களை amazonbot@amazon.com-ஐத் தொடர்புகொள்ளுமாறு கேட்கிறது.