meta-externalfetcher
యూజర్ అడిగినప్పుడు, ఉదాహరణకు వెబ్సైట్లలో పనులు పూర్తి చేయడానికి ప్రజలకు సహాయపడే agentic AIకి తోడ్పడటానికి, Meta-ExternalFetcher వ్యక్తిగత లింక్లను తెచ్చుకుంటుంది. యూజర్లు అభ్యర్థించిన ఫెచ్లను చేస్తుంది కాబట్టి ఇది robots.txtను దాటవేయవచ్చని Meta చెబుతుంది, కాబట్టి ఫైర్వాల్ నియమం మాత్రమే దీన్ని నమ్మదగిన విధంగా ఆపుతుంది.
దీన్ని ఎలా అనుమతించాలి
User-agent: meta-externalfetcher
Allow: / దీన్ని ఎలా బ్లాక్ చేయాలి
User-agent: meta-externalfetcher
Disallow: / ఇది ఏమి చేస్తుంది
వెబ్సైట్లలో పనులు పూర్తి చేయడానికి యూజర్లకు సహాయపడే agentic AI వంటి ప్రోడక్ట్ ఫంక్షన్లకు తోడ్పడటానికి Meta-ExternalFetcher యూజర్ ప్రారంభించిన వ్యక్తిగత లింక్ల ఫెచ్లను చేస్తుందని Meta చెబుతుంది. ఇది సాధారణ క్రాలర్ కాదు.
ఈ ఫెచ్లను యూజర్ అభ్యర్థించినందున Meta-ExternalFetcher robots.txtను దాటవేయవచ్చని Meta చెబుతుంది. ఫైర్వాల్ వద్ద దీన్ని బ్లాక్ చేస్తే ఆ ఫెచ్లు విఫలమవుతాయి.
robots.txt టోకెన్
meta-externalfetcher
యూజర్ ఏజెంట్ స్ట్రింగ్
meta-externalfetcher/1.1 నిజమైన సందర్శనలను ఎలా ధృవీకరించాలి
Meta తన క్రాలర్ డాక్యుమెంటేషన్లో ఈ ఫెచర్ కోసం IP పరిధులను గానీ reverse DNS పద్ధతిని గానీ ప్రచురించదు, కాబట్టి యూజర్ ఏజెంట్ సరిపోలిక మాత్రమే అభ్యర్థన నిజమైనదని నిరూపించలేదు. తన క్రాలర్ల గురించిన ప్రశ్నలను Meta webmasters@meta.comకు పంపమంటుంది.