Kuinka moni sivusto julkaisee llms.txt-tiedoston? Tarkistimme 10 000 verkkotunnusta

Julkaistu

Lyhyt vastaus

Suosituimmista 10 000 verkkotunnuksesta 12,4 % julkaisee llms.txt-tiedoston (1 240), ja niistä, joiden etusivu vastaa HTML:llä, 16,7 %. Suuret sivustot julkaisevat useammin. Tiedoston julkaisevat sivustot estävät tekoälyhakurobotit 1,4 %:ssa tapauksista, kun muilla luku on 15,0 %. Luvut kertovat vain julkaisemisesta: ne eivät osoita, lukeeko mikään tekoälyavustaja tiedostoa.

llms.txt on yksi tekoälyhaun puhutuimmista tiedostoista ja samalla yksi vähiten mitatuista. Luimme jo 10 000 suosituimman verkkotunnuksen robots.txt-tiedostot, ja samalla kierroksella pyysimme jokaiselta myös osoitetta /llms.txt. Tässä tulokset.

Tällä sivulla
  1. Miten tarkistimme?
  2. Mitä löysimme?
  3. Julkaisevatko suuret sivustot useammin?
  4. Ketkä julkaisevat sen?
  5. Mitä tämä ei osoita?
  6. Kannattaako sellainen julkaista?

Miten tarkistimme?

Otimme Tranco-listan 10 000 suosituinta verkkotunnusta (listan tunnus JZWZY) ja pyysimme jokaiselta osoitetta /llms.txt kerran 21. marraskuuta 2026 AISeeWhyn omalla user agentilla. Ensin luimme etusivun ja seurasimme sen uudelleenohjausta pääpalvelimelle.

Verkkotunnus katsotaan julkaisevan llms.txt-tiedoston, kun /llms.txt itse vastaa koodilla 200, vastaus sisältää tekstiä (ei tyhjää), joka ei ole HTML-sivu, eikä osoitetta ole ohjattu toiselle sivulle, kuten kirjautumissivulle tai etusivulle. Tiedoston muotoa emme tarkistaneet tässä ajossa.

Mitä löysimme?

Julkaisevatko suuret sivustot useammin?

Kyllä, selvällä erolla. Jaoimme verkkosivustot (verkkotunnukset, joiden etusivu vastasi HTML:llä) Tranco-sijoituksen mukaan:

Ketkä julkaisevat sen?

Niistä 6 192 verkkotunnuksesta, jotka tarjoavat robots.txt-tiedoston, llms.txt-tiedoston julkaisevat poikkeavat muista:

Toisin sanoen sivustot, jotka vaivautuvat julkaisemaan llms.txt-tiedoston, ovat enimmäkseen niitä, jotka päästävät tekoälyrobotit sisään jo muutenkin.

Mitä tämä ei osoita?

Se osoittaa yhteyden, ei syytä. Sivusto, joka ottaa tekoälynäkyvyyden vakavasti, voi julkaista llms.txt-tiedoston ja pitää myös robots.txt-tiedostonsa avoimena. Se ei tarkoita, että tiedosto toi eron. Laskenta mittaa myös vain julkaisemista. Se ei osoita, lukeeko mikään tekoälyavustaja tiedostoa, eivätkä merkittävimmät tekoälyhakurobotit kerro käyttävänsä sitä.

Luvut kuvaavat etusivun sääntöjä ja yhdessä osoitteessa olevaa tiedostoa yhtenä päivänä suosituimmille verkkotunnuksille. Pienemmät sivustot voivat näyttää erilaisilta.

Kannattaako sellainen julkaista?

Se on edullista ja vaaratonta: lyhyt Markdown-yhteenveto sivustostasi ja luettelo hyödyllisimmistä sivuistasi. Pidä se täsmällisenä ja linkit toimivina. Älä pidä sitä korvikkeena robottien päästämiselle sisään: llms.txt ei hyödytä ketään, jos sivuston palomuuri torjuu robotin tai robots.txt kieltää sen.

Ilmaiset työkalut

Seuraavat vaiheet

Usein kysytyt kysymykset

Kuinka suurella osalla verkkosivustoista on llms.txt-tiedosto?

Tarkistamistamme 10 000 suosituimmasta verkkotunnuksesta 12,4 % julkaisee sellaisen. Niistä verkkotunnuksista, joiden etusivu vastaa HTML:llä, osuus on 16,7 %, ja suurimmilla sivustoilla se on korkeampi: 22,6 % 1 000 suosituimmassa.

Sallivatko llms.txt-tiedoston julkaisevat sivustot tekoälyrobotit useammin?

Datassamme kyllä: ne estävät tekoälyn haku- ja käyttäjärobotit 1,4 %:ssa tapauksista, kun sivustoilla ilman tiedostoa luku on 15,0 %. Kyse on korrelaatiosta. Se ei osoita, että tiedosto muuttaa robottien suhtautumista sivustoon.

Auttaako llms.txt tulemaan lainatuksi tekoälyavustajissa?

Datamme ei pysty sitä kertomaan. Se laskee, mitkä sivustot julkaisevat tiedoston, ei sitä, käyttääkö avustaja sitä, eivätkä merkittävimmät tekoälyhakurobotit kerro lukevansa sitä. Luettavissa olevat sivut ja avoin pääsy ovat tärkeämpiä.

Mistä tietää, onko sivustolla oikea llms.txt-tiedosto?

Pyydä osoitetta /llms.txt ja tarkista, että se vastaa kyseisessä osoitteessa koodilla 200 ja että sisältö on tekstiä, joka ei ole HTML-sivu. Uudelleenohjaus etusivulle tai kirjautumissivulle ei ole llms.txt-tiedosto.

Lähteet

Lisää artikkeleita