Koľko webov zverejňuje llms.txt? Skontrolovali sme 10 000 domén

Publikované

Krátka odpoveď

Z 10 000 najpopulárnejších domén zverejňuje llms.txt 12,4% (1 240) a 16,7% z tých, ktorých domovská stránka odpovedá HTML. Väčšie weby ho zverejňujú častejšie. Weby, ktoré ho zverejňujú, blokujú AI vyhľadávacie crawlery v 1,4% prípadov, oproti 15,0% pri weboch bez neho. Počíta sa iba zverejnenie: neukazuje, či súbor niektorý AI asistent číta.

llms.txt je jeden z najdiskutovanejších súborov v AI vyhľadávaní a jeden z najmenej zmeraných. Robots.txt 10 000 najpopulárnejších domén sme už čítali a v tom istom prechode sme sa každej opýtali aj na /llms.txt. Toto z toho vyšlo.

Na tejto stránke
  1. Ako sme to skontrolovali?
  2. Čo sme zistili?
  3. Zverejňujú ho viac väčšie weby?
  4. Kto ho zverejňuje?
  5. Čo to neukazuje?
  6. Mali by ste ho zverejniť?

Ako sme to skontrolovali?

Vzali sme 10 000 najlepších domén zo zoznamu Tranco (ID zoznamu JZWZY) a 21. novembra 2026 sme si z každej raz vyžiadali /llms.txt ako vlastný user agent AISeeWhy, po načítaní domovskej stránky a nasledovaní jej presmerovania na hlavného hostiteľa.

Doména sa počíta ako zverejňujúca llms.txt, ak samotný /llms.txt odpovie kódom 200, neprázdnym textovým telom, ktoré nie je HTML stránkou, a bez presmerovania na inú stránku, napríklad prihlásenie alebo domovskú stránku. Formát súboru sme v tomto behu nekontrolovali.

Čo sme zistili?

Zverejňujú ho viac väčšie weby?

Áno, s jasným rozdielom. Weby (domény, ktorých domovská stránka odpovedala HTML) sme rozdelili podľa poradia v Tranco:

Kto ho zverejňuje?

Spomedzi 6 192 domén, ktoré poskytujú robots.txt, sa tie, ktoré zverejňujú llms.txt, líšia od ostatných:

Inými slovami, weby, ktoré sa obťažujú zverejniť llms.txt, sú väčšinou tie, ktoré AI crawlery už púšťajú dnu.

Čo to neukazuje?

Ukazuje súvislosť, nie príčinu. Web, ktorý berie viditeľnosť v AI vážne, môže zverejniť llms.txt a zároveň nechať robots.txt otvorený; neznamená to, že rozdiel urobil ten súbor. Počet navyše meria iba zverejnenie. Neukazuje, či súbor niektorý AI asistent číta, a hlavné AI vyhľadávacie crawlery nehovoria, že ho používajú.

Čísla popisujú pravidlá na domovskej stránke a súbor na jednej adrese v jeden deň, pre najpopulárnejšie domény. Menšie weby môžu vyzerať inak.

Mali by ste ho zverejniť?

Je to lacné a neškodné: krátke zhrnutie vášho webu v Markdowne a zoznam vašich najužitočnejších stránok. Udržiavajte ho presný a odkazy funkčné. Nepovažujte ho za náhradu za vpustenie crawlerov: llms.txt na webe, ktorého firewall crawler odmieta alebo ktorého robots.txt ho zakazuje, nepomôže nikomu.

Nástroje zadarmo

Ďalšie kroky

Časté otázky

Aký podiel webov má llms.txt?

Z 10 000 najpopulárnejších domén, ktoré sme skontrolovali, ho zverejňuje 12,4%. Medzi doménami, ktorých domovská stránka odpovedá HTML, je podiel 16,7% a pri najväčších weboch je vyšší: 22,6% v prvých 1 000.

Povoľujú weby s llms.txt AI crawlery častejšie?

V našich údajoch áno: AI vyhľadávacie a používateľské crawlery blokujú v 1,4% prípadov oproti 15,0% pri weboch bez neho. Je to korelácia. Neukazuje, že súbor mení, ako crawlery s webom zaobchádzajú.

Pomôže mi llms.txt dostať sa do citácií AI asistentov?

Naše údaje to nevedia povedať. Počítajú, ktoré weby súbor zverejňujú, nie či ho asistent používa, a hlavné AI vyhľadávacie crawlery neuvádzajú, že ho čítajú. Dôležitejšie sú stránky, ktoré sa dajú prečítať, a otvorený prístup.

Ako zistím, či má web skutočný llms.txt?

Vyžiadajte si /llms.txt a overte, že na tejto adrese odpovie kódom 200 s textovým telom, ktoré nie je HTML stránkou. Presmerovanie na domovskú stránku alebo prihlásenie nie je llms.txt.

Zdroje

Ďalšie články