meta-externalagent
Meta-ExternalAgent என்பது அடிப்படை AI மாதிரிகளைப் பயிற்றுவித்தல், உள்ளடக்கத்தை நேரடியாக index செய்து தயாரிப்புகளை மேம்படுத்துதல் போன்ற பயன்பாடுகளுக்கான Meta-இன் கிராலர். robots.txt disallow மூலம் இதைத் தடுக்கலாம் என்று Meta சொல்கிறது. Meta AI தேடல் meta-webindexer என்ற வேறு கிராலரைப் பயன்படுத்துகிறது; இந்த விதி அதை உள்ளடக்காது.
இதை எப்படி அனுமதிப்பது
User-agent: meta-externalagent
Allow: / இதை எப்படித் தடுப்பது
User-agent: meta-externalagent
Disallow: / இது என்ன செய்கிறது
அடிப்படை AI மாதிரிகளைப் பயிற்றுவித்தல் அல்லது உள்ளடக்கத்தை நேரடியாக index செய்து தயாரிப்புகளை மேம்படுத்துதல் போன்ற பயன்பாடுகளுக்காக Meta-ExternalAgent கிராலர் இணையத்தை crawl செய்கிறது என்று Meta சொல்கிறது. robots.txt-இல் meta-externalagent-க்கான disallow விதியைச் சேர்த்து இதைத் தடுப்பதை Meta ஆவணப்படுத்துகிறது.
இது Meta AI தேடல் முடிவுகளை மேம்படுத்த Meta பயன்படுத்தும் meta-webindexer-இலிருந்தும், பயனரின் கோரிக்கையின்பேரில் இணைப்புகளைப் பெறும் Meta-ExternalFetcher-இலிருந்தும் தனியானது.
எங்கள் 2026-11 ஆய்வில், robots.txt உள்ள பிரபலத் தளங்களில் 19.5% இதைத் தடுத்தன. →
robots.txt டோக்கன்
meta-externalagent
User-agent சரம்
meta-externalagent/1.1 உண்மையான வருகைகளை எப்படிச் சரிபார்ப்பது
Meta தனது கிராலர் ஆவணங்களில் இந்த கிராலர்-க்கான IP வரம்புகளையோ reverse DNS முறையையோ வெளியிடவில்லை, எனவே user agent பொருந்துவது மட்டும் ஒரு கோரிக்கை உண்மையானது என்று நிரூபிக்காது. தனது கிராலர்கள் பற்றிய கேள்விகளை webmasters@meta.com-க்கு அனுப்புமாறு Meta கூறுகிறது.
உங்கள் தளம் இதை உள்ளே விடுகிறதா என்று சரிபாருங்கள் →
AI கிராலர்களுக்கான robots.txt: எதை அனுமதிப்பது, எதைத் தடுப்பது →