Apakah llms-full.txt, dan patutkah anda menerbitkannya bersama llms.txt?
llms-full.txt ialah satu fail teks yang memuatkan teks penuh dokumentasi sesebuah laman, biasanya dalam Markdown, yang diterbitkan bersebelahan indeks /llms.txt yang ringkas. Ia bukan sebahagian daripada cadangan llms.txt di llmstxt.org tetapi konvensyen yang diguna pakai laman dokumentasi. Terbitkannya jika anda mengendalikan dokumentasi pembangun yang dimuatkan oleh ejen secara pukal; bagi kebanyakan laman perniagaan, llms.txt yang baik dan halaman yang bersih sudah memadai.
Artikel kami tentang apakah llms.txt menerangkan fail indeks itu sendiri: formatnya, asal usulnya dan siapa yang membacanya. Artikel ini tentang saudaranya yang lebih besar. Jika anda pernah melihat llms-full.txt di laman dokumentasi, atau penyemak bertanya sama ada anda memilikinya, berikut apakah fail itu, apa yang dinyatakan dan tidak dinyatakan oleh cadangan itu, dan sama ada ia berbaloi diusahakan.
Dalam halaman ini
- Adakah llms-full.txt sebahagian daripada spesifikasi llms.txt?
- Apakah beza llms-full.txt dengan llms.txt dan halaman .md?
- Siapa yang menerbitkan llms-full.txt?
- Adakah crawler AI membaca llms.txt atau llms-full.txt?
- Berapa besar llms-full.txt boleh jadi?
- Bagaimana saya menjana dan menyemak llms-full.txt?
- Patutkah llms-full.txt menjadi keutamaan?
Adakah llms-full.txt sebahagian daripada spesifikasi llms.txt?
Tidak. Cadangan di llmstxt.org, kini versi 2 (diubah suai 10 Ogos 2026), hanya mentakrifkan fail bernama llms.txt, di akar laman atau di mana-mana laluan, di mana fail meliputi halaman di bawah laluannya. Ia juga mencadangkan versi Markdown bagi halaman individu, di URL halaman dengan .md ditambah (page.html.md) atau dengan sambungan diganti (page.md), serta index.html.md atau index.md untuk URL tanpa nama fail.
Satu fail dengan semua kandungan tidak muncul di mana-mana dalam spesifikasi. Versi 1 menerangkan alat, llms_txt2ctx, yang mengembangkan llms.txt menjadi satu fail konteks. Versi 2 membuang alat itu daripada cadangan dan sebaliknya menyatakan kegunaan yang dijangka: ejen membaca atau mencari dalam llms.txt, kemudian mengikut pautan yang mereka perlukan. Dokumentasi FastHTML, contoh cadangan itu sendiri, masih menyediakan fail yang dikembangkan bernama llms-ctx-full.txt.
Jadi llms-full.txt ialah konvensyen penamaan. Tiada format yang dipersetujui selain "semua halaman, satu demi satu".
Apakah beza llms-full.txt dengan llms.txt dan halaman .md?
Versi 2 cadangan itu menambah cara untuk ejen mencari versi Markdown sesuatu halaman dan llms.txt yang meliputinya, menggunakan hubungan pautan standard dalam pengepala HTTP atau dalam HTML halaman:
llms.txtialah indeks: tajuk, ringkasan dan senarai pautan. Cadangan itu menyatakan ia patut kekal cukup kecil untuk muat dalam konteks model.- Halaman
.mdialah salinan bersih halaman tunggal. Ia sebahagian daripada cadangan, dan ejen hanya mengambil yang diperlukannya. llms-full.txtialah setiap halaman yang digabungkan dalam satu fail. Satu permintaan memberi ejen segala-galanya, dengan kos saiz.
# HTTP response header on https://example.com/docs/setup.html
Link: </docs/setup.html.md>; rel="alternate"; type="text/markdown", </docs/llms.txt>; rel="describedby"
# The same as HTML link elements in the page <head>
<link rel="alternate" type="text/markdown" href="/docs/setup.html.md">
<link rel="describedby" href="/docs/llms.txt"> Tiada hubungan pautan yang setara untuk llms-full.txt. Laman yang menerbitkannya biasanya memaut kepadanya dari llms.txt mereka.
Siapa yang menerbitkan llms-full.txt?
Kebanyakannya laman dokumentasi pembangun. Apabila kami menyemak pada 17 November 2026, fail-fail ini aktif:
- Cloudflare:
developers.cloudflare.com/llms-full.txt, kira-kira 71 MB. llms.txt akarnya bersaiz 17 KB dan memaut ke llms.txt berasingan bagi setiap produk. - Anthropic:
platform.claude.com/llms-full.txt, kira-kira 53 MB. llms.txt bersaiz 102 KB memaut kepadanya di bahagian akhir. - OpenAI:
developers.openai.com/llms-full.txt, kira-kira 9.7 MB, diterangkan dalam fail itu sebagai eksport Markdown satu fail. llms.txt-nya bersaiz 6 KB. - Perplexity:
docs.perplexity.ai/llms-full.txt, kira-kira 4 MB, dengan barisSource:yang memberi URL setiap halaman. llms.txt-nya bersaiz 46 KB.
Keempat-empatnya dokumentasi API dan produk, dibaca oleh pembangun dan ejen pengekodan. Kami tidak mengira llms-full.txt dalam kajian November 2026 kami terhadap 1,000 domain paling popular; 132 daripadanya menerbitkan llms.txt, dan 117 daripada itu mengikut format llmstxt.org.
Adakah crawler AI membaca llms.txt atau llms-full.txt?
Tidak, menurut mana-mana dokumentasi yang dapat kami temui. Halaman crawler OpenAI, Anthropic dan Perplexity menerangkan bot dan token robots.txt mereka, dan tiada satu pun menyatakan crawler tersebut membaca llms.txt atau llms-full.txt di laman lain. Google menyatakan anda tidak perlu mencipta fail baharu yang boleh dibaca mesin, fail teks AI atau markup untuk muncul dalam AI Overviews atau AI Mode.
Menerbitkan fail ini untuk dokumentasi sendiri tidak sama dengan membaca fail anda. llmstxt.org menyatakan fail ini paling banyak digunakan untuk dokumentasi perisian, di mana ejen pengekodan mengikutinya. Lighthouse dalam Chrome menyertakan audit llms.txt, tetapi ia hanya menandakan ralat pelayan semasa mengambil /llms.txt; fail yang tiada dikira sebagai tidak berkenaan, dan audit itu tidak menyebut llms-full.txt.
Jika anda mahukan bukti untuk laman sendiri, cari permintaan ke /llms-full.txt dalam log pelayan anda dan lihat user agent-nya.
Berapa besar llms-full.txt boleh jadi?
Tiada had yang didokumenkan, kerana tiada spesifikasi yang mentakrifkan fail itu. Had praktikalnya ialah pembaca. llmstxt.org menyatakan bahawa tetingkap konteks, walaupun lebih besar daripada dahulu, masih terlalu kecil untuk kebanyakan laman web secara keseluruhan. Fail beberapa megabait tidak boleh dibaca sekali gus, jadi ejen perlu mencari di dalamnya atau membacanya secara berperingkat, iaitu apa yang sudah dibenarkan oleh indeks llms.txt dan halaman .md.
Jika anda tetap mahu menerbitkannya:
- Pecahkan dokumentasi besar mengikut produk atau bahagian, seperti yang dilakukan Cloudflare dengan fail llms.txt bagi setiap produk, dan bukannya menghantar satu fail yang sangat besar.
- Letakkan URL sumber di atas setiap halaman, supaya jawapan yang dibina daripada fail itu masih boleh menunjuk ke halaman yang betul.
- Sertakan kandungan awam sahaja. Fail itu mudah disalin keseluruhannya, dan peraturan robots.txt terpakai kepadanya seperti URL lain, termasuk sekatan crawler latihan.
- Jana semula pada setiap deploy. Salinan penuh yang lapuk lebih teruk daripada tiada langsung, kerana ia mengulangi fakta lama di satu tempat yang mudah dicapai.
Bagaimana saya menjana dan menyemak llms-full.txt?
Mulakan dengan llms.txt yang sah dan versi Markdown halaman anda; llms-full.txt kemudiannya hanya satu langkah binaan. Skrip ini membaca llms.txt anda, mengambil setiap halaman .md yang dipaut dan menggabungkannya dengan baris sumber bagi setiap satu:
import re
import urllib.request
SITE_INDEX = "https://example.com/llms.txt"
HEADERS = {"User-Agent": "llms-full-builder/1.0"}
def get(url):
req = urllib.request.Request(url, headers=HEADERS)
with urllib.request.urlopen(req, timeout=20) as resp:
return resp.read().decode("utf-8", "replace")
index = get(SITE_INDEX)
links = re.findall(r"^\s*-\s*\[([^\]]+)\]\((https?://[^)\s]+)\)", index, re.M)
parts = [index.strip()]
for title, url in links:
if not url.endswith(".md"):
continue # include only pages that have a clean Markdown version
parts.append(f"# {title}\nSource: {url}\n\n{get(url).strip()}")
with open("llms-full.txt", "w", encoding="utf-8") as f:
f.write("\n\n---\n\n".join(parts) + "\n")
print(len(parts) - 1, "pages,", sum(len(p) for p in parts), "characters") Kemudian semak hasilnya. Fail itu patut memulangkan status 200 sebagai text/plain atau text/markdown, bukan halaman HTML, dan bilangan halamannya patut sepadan dengan pautan dalam llms.txt anda. Penjana llms.txt percuma AISeeWhy membantu anda menulis indeks, dan pengesah llms.txt percuma menyemaknya terhadap format llmstxt.org: tajuk, ringkasan, bahagian dan pautan, dengan nombor baris bagi setiap masalah. llms-full.txt tiada format untuk disahkan, jadi semakan di atas ialah yang berguna.
Patutkah llms-full.txt menjadi keutamaan?
Bagi kebanyakan laman, tidak. Kedua-dua fail hanya membantu selepas pembaca dapat mencapai halaman anda. Semakan percuma AISeeWhy mengambil halaman sebagai 16 crawler AI dan carian bersebelahan pelayar dan menunjukkan sama ada robots.txt, firewall atau JavaScript menghalang mereka, yang lebih menentukan keterlihatan AI berbanding mana-mana fail teks itu.
Pembetulan untuk masalah ini
- Tiada llms.txt
- llms.txt tidak bermula dengan tajuk
- Halaman tidak disenaraikan dalam llms.txt
- llms.txt terlalu besar: 1200 KB
Langkah seterusnya
- Penguji dan penyemak robots.txt untuk perangkak AI
- Penyemak dan pengesah llms.txt
- Lihat contoh laporan penuh
- Pemantauan perangkak AI
- Pelan dan harga
Soalan lazim
Adakah llms-full.txt diwajibkan oleh cadangan llms.txt?
Tidak. Cadangan itu mentakrifkan llms.txt dan versi Markdown halaman. llms-full.txt ialah konvensyen yang diikuti sesetengah laman dokumentasi.
Apakah beza antara llm.txt dan llms.txt?
Nama fail dalam cadangan ialah llms.txt, dengan huruf s. Fail di /llm.txt tidak mengikut cadangan, dan alat yang mencari llms.txt tidak akan menemuinya.
Di mana llms-full.txt patut diletakkan?
Tiada spesifikasi yang menyatakannya. Contoh di atas meletakkannya bersebelahan llms.txt di akar laman dokumentasi, dan memaut kepadanya dari llms.txt supaya pembaca dapat menemuinya.
Adakah llms-full.txt membantu dengan Google AI Overviews?
Google menyatakan anda tidak memerlukan fail baharu yang boleh dibaca mesin atau fail teks AI untuk muncul dalam AI Overviews atau AI Mode. Halaman mesti diindeks dan layak untuk memaparkan snippet.
Bolehkah saya menyemak llms-full.txt dengan penyemak llms.txt?
Hanya sebahagiannya. Penyemak llms.txt mengesahkan format indeks, yang tidak diikuti oleh fail kandungan penuh. Untuk llms-full.txt, semak kod status, jenis kandungan, saiz dan sama ada ia sepadan dengan halaman semasa anda.
Sumber
- llmstxt.org: The /llms.txt file, v2
- llmstxt.org: Changes
- Chrome for Developers: Lighthouse llms.txt audit
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity: Perplexity crawlers
- Cloudflare: llms-full.txt
- Anthropic: llms-full.txt
- OpenAI: llms-full.txt
- Perplexity: llms-full.txt
- AISeeWhy: Laporan Akses Crawler AI, 2026-11