Amazonbot
Amazonbot అనేది తన ప్రోడక్ట్లు, సేవలను మెరుగుపరచడానికి Amazon క్రాలర్, దాని డేటా Amazon AI మోడల్ల ట్రైనింగ్కు ఉపయోగించబడవచ్చని Amazon చెబుతుంది. ఇది robots.txtను గౌరవిస్తుంది. సెర్చ్ కోసం Amzn-SearchBot, Alexa ప్రశ్నల వంటి యూజర్ అభ్యర్థనల కోసం Amzn-User అనే వేరు ఏజెంట్లను Amazon నడుపుతుంది, ఒక్కోదానికి సొంత టోకెన్ ఉంది.
దీన్ని ఎలా అనుమతించాలి
User-agent: Amazonbot
Allow: / దీన్ని ఎలా బ్లాక్ చేయాలి
User-agent: Amazonbot
Disallow: / ఇది ఏమి చేస్తుంది
Amazonbot తన ప్రోడక్ట్లు, సేవలను మెరుగుపరచడానికి ఉపయోగించబడుతుందని, దాని డేటా Amazon AI మోడల్ల ట్రైనింగ్కు ఉపయోగించబడవచ్చని Amazon చెబుతుంది. తన ఆటోమేటెడ్ క్రాలింగ్ user-agent, allow లేదా disallow నియమాలతో సహా Robots Exclusion Protocolను గౌరవిస్తుందని Amazon చెబుతుంది.
Amazon robots.txtను 30 రోజుల వరకు కాష్ చేస్తుంది, Crawl-delayను సపోర్ట్ చేయదు. Amazonbotను బ్లాక్ చేస్తే సొంత టోకెన్లు ఉన్న Amzn-SearchBot లేదా Amzn-User కవర్ కావు.
robots.txt టోకెన్
Amazonbot
యూజర్ ఏజెంట్ స్ట్రింగ్
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Amazonbot/0.1) Chrome/W.X.Y.Z Safari/537.36 నిజమైన సందర్శనలను ఎలా ధృవీకరించాలి
Amazonbot ఉపయోగించే IP చిరునామాలను Amazon ప్రచురిస్తుంది. అభ్యర్థన సోర్స్ IPని ఆ జాబితాతో సరిపోల్చండి; Amazon reverse DNS తనిఖీని డాక్యుమెంట్ చేయదు, ప్రశ్నలు ఉన్న పబ్లిషర్లను amazonbot@amazon.comను సంప్రదించమంటుంది.