meta-externalfetcher
वापरकर्ता मागणी करतो तेव्हा Meta-ExternalFetcher स्वतंत्र लिंक मिळवतो, उदाहरणार्थ वेबसाइटवर कामे पूर्ण करण्यात लोकांना मदत करणाऱ्या agentic AI ला सपोर्ट करण्यासाठी. Meta सांगते की तो वापरकर्त्यांनी मागितलेले फेच करत असल्याने robots.txt ला बगल देऊ शकतो, त्यामुळे फक्त फायरवॉल नियमच त्याला विश्वासार्हपणे थांबवतो.
त्याला परवानगी कशी द्यावी
User-agent: meta-externalfetcher
Allow: / त्याला ब्लॉक कसे करावे
User-agent: meta-externalfetcher
Disallow: / तो काय करतो
Meta सांगते की Meta-ExternalFetcher उत्पादनाच्या कार्यांना सपोर्ट करण्यासाठी, जसे की वेबसाइटवर कामे पूर्ण करण्यात वापरकर्त्यांना मदत करणारे agentic AI, वापरकर्त्याने सुरू केलेले स्वतंत्र लिंकचे फेच करतो. तो सर्वसाधारण क्रॉलर नाही.
Meta सांगते की हे फेच वापरकर्त्याने मागितल्यामुळे Meta-ExternalFetcher robots.txt ला बगल देऊ शकतो. फायरवॉलवर त्याला ब्लॉक केल्याने ते फेच अयशस्वी होतात.
robots.txt टोकन
meta-externalfetcher
युजर-एजंट स्ट्रिंग
meta-externalfetcher/1.1 खऱ्या भेटींची पडताळणी कशी करावी
Meta आपल्या क्रॉलर दस्तऐवजांमध्ये या फेचरसाठी IP रेंज किंवा reverse DNS पद्धत प्रकाशित करत नाही, त्यामुळे फक्त युजर एजंट जुळल्याने विनंती खरी असल्याचे सिद्ध होत नाही. Meta आपल्या क्रॉलरबद्दलचे प्रश्न webmasters@meta.com कडे पाठवायला सांगते.