Kolik webů publikuje llms.txt? Zkontrolovali jsme 10 000 domén

Publikováno

Stručná odpověď

Z 10 000 nejpopulárnějších domén publikuje llms.txt 12,4 % (1 240), mezi doménami, jejichž domovská stránka vrací HTML, je to 16,7 %. Větší weby ho publikují častěji. Weby s llms.txt blokují AI vyhledávací crawlery v 1,4 % případů, weby bez něj v 15,0 %. Měříme jen to, zda je soubor publikován, ne to, zda ho nějaký AI asistent čte.

llms.txt je jeden z nejdiskutovanějších souborů kolem AI vyhledávání a zároveň jeden z nejméně změřených. Už dříve jsme prošli robots.txt 10 000 nejpopulárnějších domén a při stejném průchodu jsme od každé z nich vyžádali i /llms.txt. Tady je, co jsme dostali.

Na této stránce
  1. Jak jsme to zjišťovali?
  2. Co jsme zjistili?
  3. Publikují větší weby častěji?
  4. Kdo ho publikuje?
  5. Co data neukazují?
  6. Měli byste ho publikovat?

Jak jsme to zjišťovali?

Vzali jsme 10 000 nejlepších domén ze seznamu Tranco (ID seznamu JZWZY) a 21. listopadu 2026 jsme z každé jednou vyžádali /llms.txt pod vlastním user agentem AISeeWhy, a to po načtení domovské stránky a následování jejího přesměrování na hlavní hostitele.

Doména se počítá jako publikující llms.txt, pokud samotná adresa /llms.txt odpoví kódem 200, neprázdným textovým tělem, které není HTML stránka, a bez přesměrování na jinou stránku, například na přihlášení nebo domovskou stránku. Formát souboru jsme v tomto průchodu nekontrolovali.

Co jsme zjistili?

Publikují větší weby častěji?

Ano, a s jasným náskokem. Weby (domény, jejichž domovská stránka vrátila HTML) jsme rozdělili podle pořadí v Tranco:

Kdo ho publikuje?

Mezi 6 192 doménami, které nabízejí robots.txt, se ty s llms.txt liší od ostatních:

Jinými slovy, weby, které si s llms.txt dají práci, jsou většinou ty, které AI crawlery už dnes pouštějí dovnitř.

Co data neukazují?

Ukazují souvislost, ne příčinu. Web, který bere viditelnost v AI vážně, může publikovat llms.txt a zároveň mít otevřený robots.txt, ale to neznamená, že rozdíl způsobil ten soubor. Počet navíc měří jen publikaci. Neukazuje, zda soubor nějaký AI asistent čte, a velké AI vyhledávací crawlery o jeho využívání nic netvrdí.

Čísla popisují pravidla pro domovskou stránku a soubor na jedné adrese v jeden den, a to u nejpopulárnějších domén. Menší weby mohou vypadat jinak.

Měli byste ho publikovat?

Je to levné a neškodné: krátké shrnutí webu v Markdownu a seznam vašich nejužitečnějších stránek. Udržujte ho přesný a odkazy funkční. Nepovažujte ho za náhradu toho, že crawlery pustíte dovnitř: llms.txt na webu, jehož firewall crawler odmítá nebo jehož robots.txt mu přístup zakazuje, nepomůže nikomu.

Nástroje zdarma

Další kroky

Časté dotazy

Jaký podíl webů má llms.txt?

Mezi 10 000 nejpopulárnějšími doménami, které jsme zkontrolovali, ho publikuje 12,4 %. Mezi doménami, jejichž domovská stránka vrací HTML, je podíl 16,7 % a u největších webů je vyšší: 22,6 % v první tisícovce.

Pouštějí weby s llms.txt AI crawlery častěji?

V našich datech ano: AI vyhledávací a uživatelské crawlery blokují v 1,4 % případů, weby bez něj v 15,0 %. Jde o korelaci. Neukazuje, že soubor mění to, jak se k webu crawlery chovají.

Pomůže llms.txt k tomu, aby mě AI asistenti citovali?

Z našich dat to vyčíst nelze. Počítají, kdo soubor publikuje, ne zda ho asistent používá, a velké AI vyhledávací crawlery neuvádějí, že ho čtou. Důležitější jsou stránky, které lze procházet, a otevřený přístup.

Jak poznám, že web má skutečný llms.txt?

Vyžádejte si /llms.txt a ověřte, že na této adrese přijde odpověď 200 s textovým tělem, které není HTML stránka. Přesměrování na domovskou stránku nebo na přihlášení není llms.txt.

Zdroje

Další články