meta-externalfetcher
Meta-ExternalFetcher merr lidhje individuale kur një përdorues i kërkon, për shembull për të mbështetur AI agjentike që i ndihmon njerëzit të kryejnë detyra në sajte. Meta thotë se mund ta anashkalojë robots.txt sepse kryen marrje që i kanë kërkuar përdoruesit, ndaj vetëm një rregull firewall-i e ndalon me siguri.
Si ta lejoni
User-agent: meta-externalfetcher
Allow: / Si ta bllokoni
User-agent: meta-externalfetcher
Disallow: / Çfarë bën
Meta thotë se Meta-ExternalFetcher kryen marrje të nisura nga përdoruesit për lidhje individuale, për të mbështetur funksione produktesh si AI agjentike që i ndihmon përdoruesit të kryejnë detyra në sajte. Nuk është zvarritës i përgjithshëm.
Meta deklaron se, meqë këto marrje u kërkuan nga një përdorues, Meta-ExternalFetcher mund ta anashkalojë robots.txt. Bllokimi i tij në firewall i bën ato marrje të dështojnë.
Token-i në robots.txt
meta-externalfetcher
Vargu i user agent-it
meta-externalfetcher/1.1 Si të verifikoni vizitat reale
Meta nuk publikon gama IP ose një metodë reverse DNS për këtë marrës në dokumentacionin e saj për zvarritësit, ndaj vetëm përputhja e user agent-it nuk mund të provojë që një kërkesë është e vërtetë. Meta i drejton pyetjet për zvarritësit e saj te webmasters@meta.com.