meta-externalfetcher
Meta-ExternalFetcher obté enllaços concrets quan un usuari els demana, per exemple per donar suport a una IA agèntica que ajuda les persones a fer tasques en llocs web. Meta diu que pot saltar-se robots.txt perquè fa peticions que han demanat els usuaris, així que només una regla de tallafoc l'atura de manera fiable.
Com permetre'l
User-agent: meta-externalfetcher
Allow: / Com bloquejar-lo
User-agent: meta-externalfetcher
Disallow: / Què fa
Meta diu que Meta-ExternalFetcher fa peticions d'enllaços concrets iniciades pels usuaris per donar suport a funcions del producte, com una IA agèntica que ajuda els usuaris a fer tasques en llocs web. No és un rastrejador general.
Meta afirma que, com que aquestes peticions les ha demanat un usuari, Meta-ExternalFetcher pot saltar-se robots.txt. Si el bloqueges al tallafoc, aquestes peticions fallen.
Token de robots.txt
meta-externalfetcher
Cadena del user agent
meta-externalfetcher/1.1 Com verificar les visites reals
Meta no publica rangs d'IP ni cap mètode de DNS inversa per a aquest agent a la seva documentació de rastrejadors, així que una coincidència de user agent no demostra que la petició sigui autèntica. Meta adreça les preguntes sobre els seus rastrejadors a webmasters@meta.com.