Bao nhiêu site công bố llms.txt? Chúng tôi kiểm tra 10.000 tên miền
Trong 10.000 tên miền phổ biến nhất, 12,4% công bố llms.txt (1.240), và 16,7% trong số những tên miền có trang chủ trả về HTML. Site lớn công bố thường xuyên hơn. Các site có llms.txt chặn AI search crawler ở 1,4% trường hợp, so với 15,0% ở các site không có. Con số này chỉ đếm việc công bố: nó không cho biết có trợ lý AI nào đọc file này hay không.
llms.txt là một trong những file được bàn luận nhiều nhất trong tìm kiếm AI, và là một trong những file ít được đo lường nhất. Chúng tôi đã đọc robots.txt của 10.000 tên miền hàng đầu, và trong cùng lượt đó đã yêu cầu từng tên miền cung cấp /llms.txt. Đây là kết quả nhận được.
Trong trang này
Chúng tôi đã kiểm tra như thế nào?
Chúng tôi lấy 10.000 tên miền hàng đầu của danh sách Tranco (ID danh sách JZWZY) và yêu cầu /llms.txt một lần từ mỗi tên miền vào ngày 21 tháng 11 năm 2026, bằng user agent riêng của AISeeWhy, sau khi đọc trang chủ và theo chuyển hướng của nó tới máy chủ chính.
Một tên miền được tính là công bố llms.txt khi chính /llms.txt trả về mã 200, với nội dung văn bản không rỗng và không phải trang HTML, và không chuyển hướng sang trang khác như trang đăng nhập hay trang chủ. Trong lần chạy này chúng tôi không kiểm tra định dạng của file.
Chúng tôi đã tìm thấy gì?
- 1.240 trong 10.000 tên miền (12,4%) công bố
llms.txt. - Danh sách có cả CDN và máy chủ API không phục vụ website nào. Trong 7.367 tên miền có trang chủ trả về HTML, 1.233 (16,7%) công bố một file.
- Gần như tất cả đều có robots.txt: 1.229 trong 1.240.
Site lớn có công bố nhiều hơn không?
Có, với chênh lệch rõ rệt. Chúng tôi chia các website (tên miền có trang chủ trả về HTML) theo thứ hạng Tranco:
- Hạng 1 đến 1.000: 22,6% công bố llms.txt (149 trên 658 website).
- Hạng 1.001 đến 3.000: 18,2% (264 trên 1.449).
- Hạng 3.001 đến 10.000: 15,6% (820 trên 5.260).
Ai công bố llms.txt?
Trong 6.192 tên miền có robots.txt, những tên miền công bố llms.txt có đặc điểm khác với phần còn lại:
- Họ chặn ít nhất một AI crawler huấn luyện ở 11,8% trường hợp, so với 26,0% ở các tên miền không có llms.txt.
- Họ chặn ít nhất một AI search hoặc user crawler ở 1,4% trường hợp, so với 15,0%.
- Họ dùng dòng
Content-Signalở 12,9% trường hợp, so với 4,9%.
Nói cách khác, những site chịu khó công bố llms.txt phần lớn là những site vốn đã cho AI crawler vào.
Dữ liệu này không cho thấy điều gì?
Nó cho thấy một mối liên hệ, không phải nguyên nhân. Một site coi trọng khả năng hiển thị với AI có thể công bố llms.txt và đồng thời giữ robots.txt mở; điều đó không có nghĩa file này đã tạo ra khác biệt. Con số cũng chỉ đo việc công bố. Nó không cho biết có trợ lý AI nào đọc file hay không, và các AI search crawler lớn không nói rằng họ dùng nó.
Các con số mô tả quy tắc ở trang chủ và file tại một địa chỉ trong một ngày, cho các tên miền phổ biến nhất. Các site nhỏ hơn có thể khác.
Bạn có nên công bố không?
Việc này rẻ và vô hại: một bản tóm tắt Markdown ngắn về site của bạn và danh sách các trang hữu ích nhất. Hãy giữ nó chính xác và các liên kết luôn hoạt động. Đừng coi nó là sự thay thế cho việc cho phép crawler truy cập: một llms.txt trên site mà tường lửa từ chối crawler, hoặc robots.txt cấm crawler, thì chẳng giúp được ai.
Bước tiếp theo
- Trình kiểm tra robots.txt cho trình thu thập AI
- Trình kiểm tra và xác thực llms.txt
- Xem ví dụ báo cáo đầy đủ
- Giám sát trình thu thập AI
- Gói và giá
Câu hỏi thường gặp
Bao nhiêu phần trăm website có llms.txt?
Trong 10.000 tên miền phổ biến nhất chúng tôi kiểm tra, 12,4% công bố một file. Trong các tên miền có trang chủ trả về HTML, tỷ lệ là 16,7%, và cao hơn ở các site lớn nhất: 22,6% trong top 1.000.
Các site có llms.txt có cho phép AI crawler thường xuyên hơn không?
Theo dữ liệu của chúng tôi, có: họ chặn AI search và user crawler ở 1,4% trường hợp, so với 15,0% ở các site không có. Đây là tương quan. Nó không cho thấy file làm thay đổi cách crawler đối xử với site.
llms.txt có giúp tôi được trợ lý AI trích dẫn không?
Dữ liệu của chúng tôi không trả lời được. Nó đếm site nào công bố file, không đếm việc trợ lý có dùng nó hay không, và các AI search crawler lớn không nói rằng họ đọc nó. Trang có thể thu thập và quyền truy cập mở quan trọng hơn.
Làm sao biết một site có llms.txt thật?
Yêu cầu /llms.txt và kiểm tra rằng nó trả về mã 200 tại đúng địa chỉ đó, với nội dung văn bản không phải trang HTML. Chuyển hướng về trang chủ hoặc trang đăng nhập không phải là llms.txt.
Nguồn tham khảo
- llmstxt.org: File /llms.txt
- AISeeWhy: Báo cáo truy cập của AI crawler, 2026-11
- Tranco: bảng xếp hạng site hàng đầu phục vụ nghiên cứu
- Google Search Central: Tính năng AI và website của bạn
- OpenAI: Tổng quan về các crawler của OpenAI