meta-externalagent
Meta-ExternalAgent është zvarritësi i Meta për përdorime si trajnimi i modeleve themelore të AI dhe përmirësimi i produkteve duke indeksuar përmbajtjen drejtpërdrejt. Meta thotë se mund ta bllokoni me një disallow në robots.txt. Kërkimi i Meta AI përdor një zvarritës tjetër, meta-webindexer, që ky rregull nuk e mbulon.
Si ta lejoni
User-agent: meta-externalagent
Allow: / Si ta bllokoni
User-agent: meta-externalagent
Disallow: / Çfarë bën
Meta thotë se zvarritësi Meta-ExternalAgent e zvarrit web-in për raste përdorimi si trajnimi i modeleve themelore të AI ose përmirësimi i produkteve duke indeksuar përmbajtjen drejtpërdrejt. Meta e dokumenton bllokimin e tij duke shtuar në robots.txt një rregull disallow për meta-externalagent.
Është i ndarë nga meta-webindexer, që Meta e përdor për të përmirësuar rezultatet e kërkimit të Meta AI, dhe nga Meta-ExternalFetcher, që merr lidhje me kërkesë të një përdoruesi.
Në studimin tonë të 2026-11, 19.5% e sajteve të njohura me robots.txt e bllokonin. →
Token-i në robots.txt
meta-externalagent
Vargu i user agent-it
meta-externalagent/1.1 Si të verifikoni vizitat reale
Meta nuk publikon gama IP ose një metodë reverse DNS për këtë zvarritës në dokumentacionin e saj për zvarritësit, ndaj vetëm përputhja e user agent-it nuk mund të provojë që një kërkesë është e vërtetë. Meta i drejton pyetjet për zvarritësit e saj te webmasters@meta.com.
Kontrolloni nëse sajti juaj e lë të hyjë →
robots.txt për zvarritësit AI: çfarë të lejoni, çfarë të bllokoni →