meta-externalagent
Meta-ExternalAgent е ботът на Meta за цели като обучение на базови AI модели и подобряване на продукти чрез директно индексиране на съдържание. Meta казва, че можете да го блокирате със забрана в robots.txt. Търсенето на Meta AI използва друг бот, meta-webindexer, който това правило не обхваща.
Как да го допуснете
User-agent: meta-externalagent
Allow: / Как да го блокирате
User-agent: meta-externalagent
Disallow: / Какво прави
Meta казва, че ботът Meta-ExternalAgent обхожда мрежата за цели като обучение на базови AI модели или подобряване на продукти чрез директно индексиране на съдържание. Meta документира блокирането му чрез добавяне на правило disallow за meta-externalagent в robots.txt.
Той е отделен от meta-webindexer, който Meta използва за подобряване на резултатите от търсенето на Meta AI, и от Meta-ExternalFetcher, който изтегля връзки по заявка на потребител.
В нашето проучване от 2026-11 19.5% от популярните сайтове с robots.txt са го блокирали. →
Токен за robots.txt
meta-externalagent
Низ на user agent
meta-externalagent/1.1 Как да проверите истинските посещения
Meta не публикува IP диапазони или метод с обратен DNS за този бот в документацията си за ботовете, така че само съвпадение по user agent не може да докаже, че заявката е истинска. Meta насочва въпросите за своите ботове към webmasters@meta.com.
Проверете дали сайтът ви го допуска →
robots.txt за AI ботове: какво да разрешите и какво да блокирате →