Wat is llms-full.txt, en moet je er een naast llms.txt publiceren?
llms-full.txt is één tekstbestand met de volledige tekst van de documentatie van een site, meestal in Markdown, gepubliceerd naast de korte index /llms.txt. Het is geen onderdeel van het llms.txt-voorstel op llmstxt.org, maar een conventie die documentatiesites hebben overgenomen. Publiceer er een als je ontwikkelaarsdocumentatie hebt die agents in één keer laden; voor de meeste bedrijfssites zijn een goede llms.txt en schone pagina's genoeg.
Ons artikel over wat llms.txt is, behandelt het indexbestand zelf: het formaat, waar het vandaan komt en wie het leest. Dit artikel gaat over zijn grotere broer. Als je llms-full.txt op een documentatiesite hebt gezien, of een checker vroeg of je er een hebt, lees je hier wat het bestand is, wat het voorstel wel en niet zegt en of het de moeite waard is.
Op deze pagina
- Maakt llms-full.txt deel uit van de llms.txt-specificatie?
- Hoe verschilt llms-full.txt van llms.txt en .md-pagina's?
- Wie publiceert llms-full.txt?
- Lezen AI-crawlers llms.txt of llms-full.txt?
- Hoe groot mag llms-full.txt zijn?
- Hoe genereer en controleer ik llms-full.txt?
- Moet llms-full.txt een prioriteit zijn?
Maakt llms-full.txt deel uit van de llms.txt-specificatie?
Nee. Het voorstel op llmstxt.org, nu in versie 2 (gewijzigd op 10 augustus 2026), definieert alleen bestanden met de naam llms.txt, in de root van de site of op elk pad, waarbij een bestand de pagina's onder zijn pad dekt. Het stelt ook Markdown-versies van afzonderlijke pagina's voor, op de URL van de pagina met .md erachter (page.html.md) of met de extensie vervangen (page.md), en index.html.md of index.md voor URL's zonder bestandsnaam.
Eén bestand met alle content komt nergens in de specificatie voor. Versie 1 beschreef een tool, llms_txt2ctx, die een llms.txt uitbreidde tot één contextbestand. Versie 2 haalde die tool uit het voorstel en beschrijft in plaats daarvan het verwachte gebruik: agents lezen of doorzoeken de llms.txt en volgen dan de links die ze nodig hebben. De documentatie van FastHTML, het eigen voorbeeld van het voorstel, levert nog steeds een uitgebreid bestand met de naam llms-ctx-full.txt.
llms-full.txt is dus een naamgevingsconventie. Er is geen afgesproken formaat behalve "alle pagina's achter elkaar".
Hoe verschilt llms-full.txt van llms.txt en .md-pagina's?
Versie 2 van het voorstel voegt een manier toe waarmee agents de Markdown-versie van een pagina en de llms.txt die hem dekt kunnen vinden, met standaard linkrelaties in een HTTP-header of in de HTML van de pagina:
llms.txtis een index: een titel, een samenvatting en lijsten met links. Het voorstel zegt dat het klein genoeg moet blijven om in de context van een model te passen..md-pagina's zijn schone kopieën van afzonderlijke pagina's. Ze maken deel uit van het voorstel, en een agent haalt alleen de pagina's op die hij nodig heeft.llms-full.txtis elke pagina samengevoegd in één bestand. Met één verzoek krijgt een agent alles, ten koste van de grootte.
# HTTP response header on https://example.com/docs/setup.html
Link: </docs/setup.html.md>; rel="alternate"; type="text/markdown", </docs/llms.txt>; rel="describedby"
# The same as HTML link elements in the page <head>
<link rel="alternate" type="text/markdown" href="/docs/setup.html.md">
<link rel="describedby" href="/docs/llms.txt"> Er is geen vergelijkbare linkrelatie voor llms-full.txt. Sites die er een publiceren, linken er meestal naar vanuit hun llms.txt.
Wie publiceert llms-full.txt?
Vooral sites met ontwikkelaarsdocumentatie. Toen we het op 17 november 2026 controleerden, stonden deze bestanden online:
- Cloudflare:
developers.cloudflare.com/llms-full.txt, ongeveer 71 MB. De llms.txt in de root is 17 KB en linkt naar een aparte llms.txt voor elk product. - Anthropic:
platform.claude.com/llms-full.txt, ongeveer 53 MB. De llms.txt van 102 KB linkt er aan het einde naar. - OpenAI:
developers.openai.com/llms-full.txt, ongeveer 9,7 MB, in het bestand beschreven als een Markdown-export in één bestand. De llms.txt is 6 KB. - Perplexity:
docs.perplexity.ai/llms-full.txt, ongeveer 4 MB, met eenSource:-regel met de URL van elke pagina. De llms.txt is 46 KB.
Alle vier zijn API- en productdocumentatie, gelezen door ontwikkelaars en coding agents. We hebben llms-full.txt niet meegeteld in ons onderzoek van november 2026 naar de 1.000 populairste domeinen; 132 daarvan publiceerden een llms.txt, en 117 daarvan volgden het formaat van llmstxt.org.
Lezen AI-crawlers llms.txt of llms-full.txt?
Niet volgens enige documentatie die we konden vinden. De crawlerpagina's van OpenAI, Anthropic en Perplexity beschrijven hun bots en robots.txt-tokens, en geen ervan zegt dat die crawlers llms.txt of llms-full.txt op andere sites lezen. Google zegt dat je geen nieuwe machineleesbare bestanden, AI-tekstbestanden of markup hoeft te maken om in AI-overzichten of AI-modus te verschijnen.
Deze bestanden publiceren voor de eigen documentatie is niet hetzelfde als die van jou lezen. llmstxt.org zegt dat de bestanden het meest worden gebruikt voor softwaredocumentatie, waar coding agents ze volgen. Lighthouse van Chrome bevat een llms.txt-audit, maar die meldt alleen een serverfout bij het ophalen van /llms.txt; een ontbrekend bestand telt als niet van toepassing, en de audit noemt llms-full.txt niet.
Wil je bewijs voor je eigen site, zoek dan in je serverlogs naar verzoeken voor /llms-full.txt en kijk naar de user agents.
Hoe groot mag llms-full.txt zijn?
Er is geen limiet gedocumenteerd, omdat geen specificatie het bestand definieert. De praktische limiet is de lezer. llmstxt.org merkt op dat contextvensters, hoewel groter dan vroeger, nog steeds te klein zijn voor de meeste websites in hun geheel. Een bestand van een paar megabyte kan niet in één keer worden gelezen, dus een agent moet het doorzoeken of in delen lezen, en dat maken de llms.txt-index en de .md-pagina's al mogelijk.
Als je er toch een publiceert:
- Splits grote documentatie op per product of sectie, zoals Cloudflare doet met een llms.txt per product, in plaats van één enorm bestand te leveren.
- Zet boven elke pagina een bron-URL, zodat een antwoord dat op het bestand is gebaseerd nog naar de juiste pagina kan verwijzen.
- Neem alleen openbare content op. Het bestand is in zijn geheel makkelijk te kopiëren, en robots.txt-regels gelden ervoor zoals voor elke andere URL, ook blokkades voor trainingscrawlers.
- Genereer het bij elke deploy opnieuw. Een verouderde volledige kopie is erger dan geen, omdat hij verouderde feiten op één handige plek herhaalt.
Hoe genereer en controleer ik llms-full.txt?
Begin met een geldige llms.txt en Markdown-versies van je pagina's; llms-full.txt is dan een buildstap. Dit script leest je llms.txt, haalt elke gelinkte .md-pagina op en voegt ze samen met een bronregel voor elke pagina:
import re
import urllib.request
SITE_INDEX = "https://example.com/llms.txt"
HEADERS = {"User-Agent": "llms-full-builder/1.0"}
def get(url):
req = urllib.request.Request(url, headers=HEADERS)
with urllib.request.urlopen(req, timeout=20) as resp:
return resp.read().decode("utf-8", "replace")
index = get(SITE_INDEX)
links = re.findall(r"^\s*-\s*\[([^\]]+)\]\((https?://[^)\s]+)\)", index, re.M)
parts = [index.strip()]
for title, url in links:
if not url.endswith(".md"):
continue # include only pages that have a clean Markdown version
parts.append(f"# {title}\nSource: {url}\n\n{get(url).strip()}")
with open("llms-full.txt", "w", encoding="utf-8") as f:
f.write("\n\n---\n\n".join(parts) + "\n")
print(len(parts) - 1, "pages,", sum(len(p) for p in parts), "characters") Controleer daarna het resultaat. Het bestand moet status 200 geven als text/plain of text/markdown, geen HTML-pagina, en het aantal pagina's moet overeenkomen met de links in je llms.txt. De gratis llms.txt-generator van AISeeWhy helpt je de index te schrijven, en de gratis llms.txt-validator controleert hem tegen het formaat van llmstxt.org: titel, samenvatting, secties en links, met regelnummers voor elk probleem. llms-full.txt heeft geen formaat om tegen te valideren, dus de controles hierboven zijn de nuttige.
Moet llms-full.txt een prioriteit zijn?
Voor de meeste sites niet. Beide bestanden helpen pas als een lezer je pagina's kan bereiken. De gratis controle van AISeeWhy haalt een pagina op als 16 AI- en zoekcrawlers naast een browser en laat zien of robots.txt, een firewall of JavaScript ze tegenhoudt, en dat bepaalt meer over zichtbaarheid in AI dan een van beide tekstbestanden.
Oplossingen voor dit probleem
- Geen llms.txt
- llms.txt begint niet met een titel
- Pagina staat niet in llms.txt
- llms.txt is te groot: 1200 KB
Volgende stappen
- robots.txt tester en checker voor AI-crawlers
- llms.txt-checker en -validator
- Bekijk een voorbeeld van een volledig rapport
- AI-crawlermonitoring
- Abonnementen en prijzen
Veelgestelde vragen
Is llms-full.txt verplicht volgens het llms.txt-voorstel?
Nee. Het voorstel definieert llms.txt en Markdown-versies van pagina's. llms-full.txt is een conventie die sommige documentatiesites volgen.
Wat is het verschil tussen llm.txt en llms.txt?
De bestandsnaam in het voorstel is llms.txt, met een s. Een bestand op /llm.txt volgt het voorstel niet, en tools die naar llms.txt zoeken, vinden het niet.
Waar hoort llms-full.txt te staan?
Geen enkele specificatie zegt het. De voorbeelden hierboven zetten het naast llms.txt in de root van de documentatiesite en linken ernaar vanuit llms.txt, zodat lezers het kunnen vinden.
Helpt llms-full.txt bij AI-overzichten van Google?
Google zegt dat je geen nieuwe machineleesbare bestanden of AI-tekstbestanden nodig hebt om in AI-overzichten of AI-modus te verschijnen. Pagina's moeten geïndexeerd zijn en met een snippet getoond mogen worden.
Kan ik llms-full.txt controleren met een llms.txt-checker?
Maar gedeeltelijk. Een llms.txt-checker valideert het indexformaat, en dat volgt een bestand met de volledige content niet. Controleer bij llms-full.txt de statuscode, het contenttype, de grootte en of het overeenkomt met je huidige pagina's.
Bronnen
- llmstxt.org: The /llms.txt file, v2
- llmstxt.org: Changes
- Chrome for Developers: Lighthouse llms.txt audit
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity: Perplexity crawlers
- Cloudflare: llms-full.txt
- Anthropic: llms-full.txt
- OpenAI: llms-full.txt
- Perplexity: llms-full.txt
- AISeeWhy: AI Crawler Access Report, 2026-11