llms-full.txt là gì, và bạn có nên xuất bản nó cạnh llms.txt không?
llms-full.txt là một tệp văn bản duy nhất chứa toàn bộ nội dung tài liệu của một website, thường ở dạng Markdown, được xuất bản cạnh tệp chỉ mục ngắn /llms.txt. Nó không thuộc đề xuất llms.txt tại llmstxt.org mà là một quy ước mà các website tài liệu đã áp dụng. Hãy xuất bản nếu bạn vận hành tài liệu cho nhà phát triển mà các tác tử tải hàng loạt; với hầu hết website doanh nghiệp, một tệp llms.txt tốt và các trang sạch là đủ.
Bài viết của chúng tôi về llms.txt nói về chính tệp chỉ mục: định dạng, nguồn gốc và ai đọc nó. Bài này nói về người anh lớn của nó. Nếu bạn từng thấy llms-full.txt trên một website tài liệu, hoặc một công cụ kiểm tra hỏi bạn có tệp đó không, dưới đây là tệp đó là gì, đề xuất nói gì và không nói gì, và có đáng công làm không.
Trong trang này
- llms-full.txt có thuộc đặc tả llms.txt không?
- llms-full.txt khác llms.txt và các trang .md thế nào?
- Ai xuất bản llms-full.txt?
- Trình thu thập dữ liệu AI có đọc llms.txt hay llms-full.txt không?
- llms-full.txt có thể lớn đến mức nào?
- Làm sao tạo và kiểm tra llms-full.txt?
- llms-full.txt có nên được ưu tiên không?
llms-full.txt có thuộc đặc tả llms.txt không?
Không. Đề xuất tại llmstxt.org, nay ở phiên bản 2 (sửa đổi ngày 10 tháng 8 năm 2026), chỉ định nghĩa các tệp tên llms.txt, ở thư mục gốc của website hoặc ở bất kỳ đường dẫn nào, trong đó mỗi tệp bao quát các trang nằm dưới đường dẫn của nó. Đề xuất cũng gợi ý các phiên bản Markdown của từng trang, tại URL của trang có thêm .md (page.html.md) hoặc thay phần mở rộng (page.md), và index.html.md hoặc index.md cho URL không có tên tệp.
Một tệp duy nhất chứa toàn bộ nội dung không xuất hiện ở đâu trong đặc tả. Phiên bản 1 mô tả một công cụ, llms_txt2ctx, mở rộng llms.txt thành một tệp ngữ cảnh duy nhất. Phiên bản 2 bỏ công cụ đó khỏi đề xuất và thay vào đó nêu cách dùng dự kiến: tác tử đọc hoặc tìm trong llms.txt, rồi đi theo những liên kết cần thiết. Tài liệu FastHTML, ví dụ của chính đề xuất, vẫn phục vụ một tệp mở rộng tên llms-ctx-full.txt.
Vì vậy llms-full.txt là một quy ước đặt tên. Không có định dạng thống nhất nào ngoài “mọi trang, nối tiếp nhau”.
llms-full.txt khác llms.txt và các trang .md thế nào?
Phiên bản 2 của đề xuất thêm cách để tác tử tìm phiên bản Markdown của một trang và tệp llms.txt bao quát trang đó, bằng các quan hệ liên kết chuẩn trong header HTTP hoặc trong HTML của trang:
llms.txtlà một chỉ mục: tiêu đề, bản tóm tắt và các danh sách liên kết. Đề xuất nói nó nên đủ nhỏ để vừa trong ngữ cảnh của mô hình.- Các trang
.mdlà bản sao sạch của từng trang. Chúng thuộc đề xuất, và tác tử chỉ tải những trang cần thiết. llms-full.txtlà mọi trang gộp vào một tệp. Một yêu cầu cho tác tử mọi thứ, đổi lại là kích thước lớn.
# HTTP response header on https://example.com/docs/setup.html
Link: </docs/setup.html.md>; rel="alternate"; type="text/markdown", </docs/llms.txt>; rel="describedby"
# The same as HTML link elements in the page <head>
<link rel="alternate" type="text/markdown" href="/docs/setup.html.md">
<link rel="describedby" href="/docs/llms.txt"> Không có quan hệ liên kết tương đương nào cho llms-full.txt. Các website xuất bản nó thường liên kết tới nó từ llms.txt.
Ai xuất bản llms-full.txt?
Chủ yếu là các website tài liệu cho nhà phát triển. Khi chúng tôi kiểm tra vào ngày 17 tháng 11 năm 2026, các tệp sau đang hoạt động:
- Cloudflare:
developers.cloudflare.com/llms-full.txt, khoảng 71 MB. Tệp llms.txt gốc nặng 17 KB và liên kết tới một llms.txt riêng cho từng sản phẩm. - Anthropic:
platform.claude.com/llms-full.txt, khoảng 53 MB. Tệp llms.txt 102 KB liên kết tới nó ở cuối. - OpenAI:
developers.openai.com/llms-full.txt, khoảng 9,7 MB, được mô tả trong tệp là bản xuất Markdown một tệp. Tệp llms.txt của họ nặng 6 KB. - Perplexity:
docs.perplexity.ai/llms-full.txt, khoảng 4 MB, với một dòngSource:ghi URL của từng trang. Tệp llms.txt của họ nặng 46 KB.
Cả bốn đều là tài liệu API và sản phẩm, được nhà phát triển và tác tử lập trình đọc. Chúng tôi không đếm llms-full.txt trong nghiên cứu tháng 11 năm 2026 về 1.000 tên miền phổ biến nhất; 132 tên miền trong số đó xuất bản llms.txt, và 117 trong số này theo định dạng llmstxt.org.
Trình thu thập dữ liệu AI có đọc llms.txt hay llms-full.txt không?
Theo mọi tài liệu chúng tôi tìm được thì không. Các trang về trình thu thập dữ liệu của OpenAI, Anthropic và Perplexity mô tả bot và token robots.txt của họ, và không trang nào nói các trình thu thập đó đọc llms.txt hay llms-full.txt trên các website khác. Google cho biết bạn không cần tạo tệp máy đọc mới, tệp văn bản cho AI hay đánh dấu để xuất hiện trong AI Overviews hoặc AI Mode.
Xuất bản các tệp này cho tài liệu của chính họ không có nghĩa là họ đọc tệp của bạn. llmstxt.org cho biết các tệp này được dùng nhiều nhất cho tài liệu phần mềm, nơi tác tử lập trình đi theo chúng. Lighthouse của Chrome có một bước kiểm tra llms.txt, nhưng chỉ báo lỗi khi máy chủ gặp lỗi lúc tải /llms.txt; thiếu tệp được tính là không áp dụng, và bước kiểm tra không nhắc đến llms-full.txt.
Nếu bạn muốn bằng chứng cho website của mình, hãy tìm trong nhật ký máy chủ các yêu cầu tới /llms-full.txt và xem user agent.
llms-full.txt có thể lớn đến mức nào?
Không có giới hạn nào được công bố, vì không đặc tả nào định nghĩa tệp này. Giới hạn thực tế là người đọc. llmstxt.org lưu ý rằng cửa sổ ngữ cảnh, dù lớn hơn trước, vẫn quá nhỏ cho toàn bộ hầu hết các website. Một tệp vài megabyte không thể đọc trong một lượt, nên tác tử phải tìm trong đó hoặc đọc từng phần, điều mà chỉ mục llms.txt và các trang .md vốn đã cho phép.
Nếu bạn vẫn xuất bản:
- Chia tài liệu lớn theo sản phẩm hoặc theo phần, như Cloudflare làm với các tệp llms.txt cho từng sản phẩm, thay vì phát hành một tệp khổng lồ.
- Đặt URL nguồn phía trên mỗi trang, để câu trả lời xây dựng từ tệp vẫn trỏ được tới đúng trang.
- Chỉ đưa vào nội dung công khai. Tệp rất dễ bị sao chép nguyên vẹn, và quy tắc robots.txt áp dụng cho nó như mọi URL khác, kể cả lệnh chặn trình thu thập huấn luyện.
- Tạo lại tệp ở mỗi lần triển khai. Một bản sao đầy đủ đã cũ còn tệ hơn không có, vì nó lặp lại dữ kiện lỗi thời ở một chỗ tiện lợi.
Làm sao tạo và kiểm tra llms-full.txt?
Hãy bắt đầu từ một llms.txt hợp lệ và các phiên bản Markdown của trang; khi đó llms-full.txt chỉ là một bước build. Script này đọc llms.txt, tải mọi trang .md được liên kết và nối chúng lại với một dòng nguồn cho mỗi trang:
import re
import urllib.request
SITE_INDEX = "https://example.com/llms.txt"
HEADERS = {"User-Agent": "llms-full-builder/1.0"}
def get(url):
req = urllib.request.Request(url, headers=HEADERS)
with urllib.request.urlopen(req, timeout=20) as resp:
return resp.read().decode("utf-8", "replace")
index = get(SITE_INDEX)
links = re.findall(r"^\s*-\s*\[([^\]]+)\]\((https?://[^)\s]+)\)", index, re.M)
parts = [index.strip()]
for title, url in links:
if not url.endswith(".md"):
continue # include only pages that have a clean Markdown version
parts.append(f"# {title}\nSource: {url}\n\n{get(url).strip()}")
with open("llms-full.txt", "w", encoding="utf-8") as f:
f.write("\n\n---\n\n".join(parts) + "\n")
print(len(parts) - 1, "pages,", sum(len(p) for p in parts), "characters") Sau đó kiểm tra kết quả. Tệp phải trả về trạng thái 200 với kiểu text/plain hoặc text/markdown, không phải trang HTML, và số trang phải khớp với các liên kết trong llms.txt. Trình tạo llms.txt miễn phí của AISeeWhy giúp bạn viết chỉ mục, và trình xác thực llms.txt miễn phí kiểm tra nó theo định dạng llmstxt.org: tiêu đề, tóm tắt, các phần và liên kết, kèm số dòng cho mỗi vấn đề. llms-full.txt không có định dạng để xác thực, nên các bước kiểm tra ở trên mới là những bước hữu ích.
llms-full.txt có nên được ưu tiên không?
Với hầu hết website thì không. Cả hai tệp chỉ có ích sau khi người đọc truy cập được trang của bạn. Bước kiểm tra miễn phí của AISeeWhy tải trang dưới danh nghĩa 16 trình thu thập dữ liệu AI và tìm kiếm bên cạnh một trình duyệt và cho thấy robots.txt, tường lửa hay JavaScript có chặn chúng không, điều quyết định mức độ hiển thị trong AI nhiều hơn cả hai tệp văn bản.
Cách khắc phục vấn đề này
- Không có llms.txt
- llms.txt không bắt đầu bằng tiêu đề
- Trang không được liệt kê trong llms.txt
- llms.txt quá lớn: 1200 KB
Bước tiếp theo
- Trình kiểm tra robots.txt cho trình thu thập AI
- Trình kiểm tra và xác thực llms.txt
- Xem ví dụ báo cáo đầy đủ
- Giám sát trình thu thập AI
- Gói và giá
Câu hỏi thường gặp
Đề xuất llms.txt có bắt buộc llms-full.txt không?
Không. Đề xuất định nghĩa llms.txt và các phiên bản Markdown của trang. llms-full.txt là một quy ước mà một số website tài liệu áp dụng.
llm.txt và llms.txt khác nhau thế nào?
Tên tệp trong đề xuất là llms.txt, có chữ s. Một tệp tại /llm.txt không theo đề xuất, và các công cụ tìm llms.txt sẽ không thấy nó.
Nên đặt llms-full.txt ở đâu?
Không đặc tả nào quy định. Các ví dụ ở trên đặt nó cạnh llms.txt ở thư mục gốc của website tài liệu, và liên kết tới nó từ llms.txt để người đọc tìm thấy.
llms-full.txt có giúp xuất hiện trong Google AI Overviews không?
Google cho biết bạn không cần tệp máy đọc mới hay tệp văn bản cho AI để xuất hiện trong AI Overviews hoặc AI Mode. Trang phải được lập chỉ mục và đủ điều kiện hiển thị đoạn trích.
Tôi có thể kiểm tra llms-full.txt bằng công cụ kiểm tra llms.txt không?
Chỉ một phần. Công cụ kiểm tra llms.txt xác thực định dạng chỉ mục, mà một tệp toàn văn không theo. Với llms-full.txt, hãy kiểm tra mã trạng thái, kiểu nội dung, kích thước và việc nó khớp với các trang hiện tại.
Nguồn tham khảo
- llmstxt.org: The /llms.txt file, v2
- llmstxt.org: Changes
- Chrome for Developers: Lighthouse llms.txt audit
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity: Perplexity crawlers
- Cloudflare: llms-full.txt
- Anthropic: llms-full.txt
- OpenAI: llms-full.txt
- Perplexity: llms-full.txt
- AISeeWhy: AI Crawler Access Report, 2026-11