Koliko mest objavlja llms.txt? Preverili smo 10.000 domen
Od 10.000 najbolj priljubljenih domen jih 12,4 % objavlja llms.txt (1.240), med tistimi, katerih domača stran odgovori s HTML, pa 16,7 %. Večja mesta ga objavljajo pogosteje. Mesta, ki ga objavljajo, blokirajo AI-pajke za iskanje v 1,4 % primerov, mesta brez njega pa v 15,0 %. To šteje le objavo: ne kaže, ali kateri AI-pomočnik datoteko bere.
llms.txt je ena najbolj obravnavanih datotek v AI-iskanju in ena najmanj izmerjenih. Robots.txt prvih 10.000 domen smo že prebrali, v istem prehodu pa smo od vsake zahtevali še /llms.txt. To je prišlo nazaj.
Na tej strani
Kako smo preverjali?
Vzeli smo prvih 10.000 domen s seznama Tranco (ID seznama JZWZY) in 21. novembra 2026 od vsake po enkrat zahtevali /llms.txt z lastnim uporabniškim agentom AISeeWhy, potem ko smo prebrali domačo stran in sledili njeni preusmeritvi na glavni gostitelj.
Domena šteje kot objavljavka llms.txt, kadar sam /llms.txt odgovori s 200, nepraznim besedilnim telesom, ki ni stran HTML, in brez preusmeritve na drugo stran, na primer prijavo ali domačo stran. Oblike datoteke v tem prehodu nismo preverjali.
Kaj smo ugotovili?
- 1.240 od 10.000 domen (12,4 %) objavlja
llms.txt. - Seznam vključuje CDN-je in gostitelje API-jev, ki ne strežejo spletnega mesta. Med 7.367 domenami, katerih domača stran je odgovorila s HTML, jih 1.233 (16,7 %) objavlja enega.
- Skoraj vse strežejo tudi robots.txt: 1.229 od 1.240.
Ali večja mesta objavljajo več?
Da, z jasno razliko. Spletna mesta (domene, katerih domača stran je odgovorila s HTML) smo razdelili po uvrstitvi Tranco:
- Uvrstitve od 1 do 1.000: 22,6 % objavlja llms.txt (149 od 658 spletnih mest).
- Uvrstitve od 1.001 do 3.000: 18,2 % (264 od 1.449).
- Uvrstitve od 3.001 do 10.000: 15,6 % (820 od 5.260).
Kdo ga objavlja?
Med 6.192 domenami, ki strežejo robots.txt, so tiste, ki objavljajo llms.txt, videti drugače kot ostale:
- Vsaj enega AI-pajka za učenje blokirajo v 11,8 % primerov, domene brez llms.txt pa v 26,0 %.
- Vsaj enega AI-pajka za iskanje ali uporabniškega pajka blokirajo v 1,4 % primerov, ostale v 15,0 %.
- Vrstico
Content-Signaluporabljajo v 12,9 % primerov, ostale v 4,9 %.
Z drugimi besedami: mesta, ki se potrudijo objaviti llms.txt, so večinoma mesta, ki AI-pajkom že dovoljujejo dostop.
Česa to ne kaže?
Kaže povezavo, ne vzroka. Mesto, ki AI-vidnost jemlje resno, lahko objavi llms.txt in hkrati ohrani odprt robots.txt; to ne pomeni, da je datoteka naredila razliko. Štetje meri tudi samo objavo. Ne kaže, ali kateri AI-pomočnik datoteko bere, večji AI-pajki za iskanje pa ne pravijo, da jo uporabljajo.
Številke opisujejo pravila za domačo stran in datoteko na enem naslovu en dan, za najbolj priljubljene domene. Manjša mesta so lahko videti drugače.
Ali naj ga objavim?
Je poceni in neškodljiv: kratek povzetek vašega mesta v Markdownu in seznam vaših najkoristnejših strani. Naj bo točen in njegove povezave naj delujejo. Ne obravnavajte ga kot nadomestila za spuščanje pajkov noter: llms.txt na mestu, katerega požarni zid pajka zavrača ali katerega robots.txt ga prepoveduje, nikomur ne pomaga.
Naslednji koraki
- Tester in preverjanje robots.txt za pajke UI
- Preverjanje in validator llms.txt
- Oglejte si primer celotnega poročila
- Spremljanje pajkov UI
- Paketi in cene
Pogosta vprašanja
Kolikšen delež spletnih mest ima llms.txt?
Med 10.000 najbolj priljubljenimi domenami, ki smo jih preverili, ga 12,4 % objavlja. Med domenami, katerih domača stran odgovori s HTML, je delež 16,7 %, pri največjih mestih pa je višji: 22,6 % med prvimi 1.000.
Ali mesta z llms.txt AI-pajkom dovolijo dostop pogosteje?
V naših podatkih da: AI-pajke za iskanje in uporabniške pajke blokirajo v 1,4 % primerov, mesta brez njega pa v 15,0 %. To je korelacija. Ne dokazuje, da datoteka spremeni, kako pajki obravnavajo mesto.
Ali mi llms.txt pomaga, da me AI-pomočniki navajajo?
Naši podatki tega ne morejo povedati. Štejejo, katera mesta datoteko objavljajo, ne, ali jo pomočnik uporablja, večji AI-pajki za iskanje pa ne navajajo, da jo berejo. Pomembnejše so strani, ki jih pajki lahko preberejo, in odprt dostop.
Kako ugotovim, ali ima mesto pravi llms.txt?
Zahtevajte /llms.txt in preverite, da na tem naslovu odgovori s 200 in besedilnim telesom, ki ni stran HTML. Preusmeritev na domačo stran ali stran za prijavo ni llms.txt.
Viri
- llmstxt.org: The /llms.txt file
- AISeeWhy: AI Crawler Access Report, 2026-11
- Tranco: a research-oriented top sites ranking
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers