Hvor mange nettsteder publiserer en llms.txt? Vi sjekket 10 000 domener

Publisert

Kort svar

Av de 10 000 mest populære domenene publiserer 12,4 % en llms.txt (1 240), og 16,7 % av dem der startsiden svarer med HTML. Større nettsteder publiserer oftere. Nettsteder som publiserer en, blokkerer AI-søkecrawlere i 1,4 % av tilfellene, mot 15,0 % for nettsteder som ikke gjør det. Dette teller bare publisering: det viser ikke om noen AI-assistent leser filen.

llms.txt er en av de mest omtalte filene innen AI-søk, og en av de minst målte. Vi har allerede lest robots.txt hos de 10 000 øverste domenene, og i samme runde ba vi hvert av dem om /llms.txt. Dette fikk vi tilbake.

På denne siden
  1. Hvordan sjekket vi?
  2. Hva fant vi?
  3. Publiserer større nettsteder oftere?
  4. Hvem publiserer en?
  5. Hva viser dette ikke?
  6. Bør du publisere en?

Hvordan sjekket vi?

Vi tok de 10 000 øverste domenene på Tranco-listen (liste-ID JZWZY) og ba om /llms.txt én gang fra hvert av dem 21. november 2026, med AISeeWhys egen user agent, etter å ha lest startsiden og fulgt omdirigeringen til hovedverten.

Et domene regnes som å publisere en llms.txt når selve /llms.txt svarer med en 200, en ikke-tom tekstkropp som ikke er en HTML-side, og ingen omdirigering til en annen side, for eksempel en innlogging eller startsiden. Vi sjekket ikke filens format i denne kjøringen.

Hva fant vi?

Publiserer større nettsteder oftere?

Ja, med god margin. Vi delte nettstedene (domener der startsiden svarte med HTML) etter Tranco-rangering:

Hvem publiserer en?

Blant de 6 192 domenene som serverer en robots.txt, ser de som publiserer en llms.txt annerledes ut enn resten:

Med andre ord er nettstedene som gidder å publisere en llms.txt, for det meste nettsteder som allerede slipper AI-crawlere inn.

Hva viser dette ikke?

Det viser en sammenheng, ikke en årsak. Et nettsted som tar AI-synlighet alvorlig, kan publisere en llms.txt og samtidig holde robots.txt åpen; det betyr ikke at filen utgjorde forskjellen. Tellingen måler også bare publisering. Den viser ikke om noen AI-assistent leser filen, og de store AI-søkecrawlerne sier ikke at de bruker den.

Tallene beskriver reglene for startsiden og filen på én adresse én dag, for de mest populære domenene. Mindre nettsteder kan se annerledes ut.

Bør du publisere en?

Det er billig og harmløst: et kort Markdown-sammendrag av nettstedet ditt og en liste over de mest nyttige sidene dine. Hold det nøyaktig og la lenkene fungere. Ikke se på det som en erstatning for å slippe crawlere inn: en llms.txt på et nettsted der brannmuren avviser crawleren, eller der robots.txt forbyr den, hjelper ingen.

Gratis verktøy

Neste steg

Vanlige spørsmål

Hvor stor andel av nettstedene har en llms.txt?

Blant de 10 000 mest populære domenene vi sjekket, publiserer 12,4 % en. Blant domenene der startsiden svarer med HTML er andelen 16,7 %, og den er høyere for de største nettstedene: 22,6 % i de øverste 1 000.

Slipper nettsteder med en llms.txt inn AI-crawlere oftere?

I dataene våre, ja: de blokkerer AI-søke- og brukercrawlere i 1,4 % av tilfellene mot 15,0 % for nettsteder uten. Dette er en korrelasjon. Det viser ikke at filen endrer hvordan crawlere behandler et nettsted.

Hjelper en llms.txt meg med å bli sitert av AI-assistenter?

Dataene våre kan ikke si det. De teller hvilke nettsteder som publiserer filen, ikke om en assistent bruker den, og de store AI-søkecrawlerne sier ikke at de leser den. Sider som kan crawles og åpen tilgang betyr mer.

Hvordan ser du om et nettsted har en ekte llms.txt?

Be om /llms.txt og sjekk at den svarer med en 200 på den adressen, med en tekstkropp som ikke er en HTML-side. En omdirigering til startsiden eller en innloggingsside er ikke en llms.txt.

Kilder

Flere artikler