meta-externalagent
Meta-ExternalAgent on Meta robot selliste kasutusviiside jaoks nagu AI alusmudelite treenimine ja toodete parandamine sisu otse indekseerides. Meta ütleb, et saad selle robots.txt disallow-reegliga blokeerida. Meta AI otsing kasutab teist robotit, meta-webindexer, mida see reegel ei kata.
Kuidas seda lubada
User-agent: meta-externalagent
Allow: / Kuidas seda blokeerida
User-agent: meta-externalagent
Disallow: / Mida see teeb
Meta ütleb, et robot Meta-ExternalAgent läbib veebi selliste kasutusjuhtude jaoks nagu AI alusmudelite treenimine või toodete parandamine sisu otse indekseerides. Meta kirjeldab selle blokeerimist, lisades robots.txt-sse meta-externalagent jaoks disallow-reegli.
See on eraldi robotist meta-webindexer, mida Meta kasutab Meta AI otsingutulemuste parandamiseks, ja laadijast Meta-ExternalFetcher, mis laadib linke kasutaja palvel.
Meie uuringus (2026-11) blokeeris selle 19.5% populaarsetest saitidest, millel on robots.txt. →
robots.txt tunnus
meta-externalagent
User agent'i string
meta-externalagent/1.1 Kuidas päris külastusi kinnitada
Meta ei avalda oma robotidokumentatsioonis selle roboti jaoks IP-vahemikke ega pöörd-DNS-meetodit, seega ei saa ainult user agent'i vastavus tõestada, et päring on ehtne. Meta suunab küsimused oma robotite kohta aadressile webmasters@meta.com.