มีกี่เว็บไซต์ที่เผยแพร่ llms.txt? เราตรวจ 10,000 โดเมน
จาก 10,000 โดเมนยอดนิยม มี 12.4% ที่เผยแพร่ llms.txt (1,240 โดเมน) และ 16.7% ของโดเมนที่หน้าแรกตอบเป็น HTML เว็บไซต์ที่ใหญ่กว่าเผยแพร่บ่อยกว่า เว็บไซต์ที่เผยแพร่ไฟล์นี้บล็อกครอว์เลอร์ค้นหา AI ในสัดส่วน 1.4% เทียบกับ 15.0% ของเว็บไซต์ที่ไม่เผยแพร่ ตัวเลขนี้นับเฉพาะการเผยแพร่ ไม่ได้บอกว่าผู้ช่วย AI ตัวใดอ่านไฟล์นี้หรือไม่
llms.txt เป็นหนึ่งในไฟล์ที่ถูกพูดถึงมากที่สุดในการค้นหาด้วย AI แต่มีการวัดผลน้อยที่สุดอย่างหนึ่ง เราอ่าน robots.txt ของ 10,000 โดเมนยอดนิยมไปแล้ว และในรอบเดียวกันก็ขอ /llms.txt จากแต่ละโดเมนด้วย นี่คือสิ่งที่ได้กลับมา
ในหน้านี้
เราตรวจอย่างไร?
เราใช้ 10,000 โดเมนแรกของรายการ Tranco (รหัสรายการ JZWZY) และขอ /llms.txt จากแต่ละโดเมนหนึ่งครั้งเมื่อวันที่ 21 พฤศจิกายน 2026 ด้วย user agent ของ AISeeWhy เอง หลังอ่านหน้าแรกและตามการเปลี่ยนเส้นทางไปยังโฮสต์หลักแล้ว
เราถือว่าโดเมนเผยแพร่ llms.txt เมื่อ /llms.txt เองตอบด้วย 200 มีเนื้อหาเป็นข้อความที่ไม่ว่างเปล่าและไม่ใช่หน้า HTML และไม่ถูกเปลี่ยนเส้นทางไปหน้าอื่น เช่น หน้าเข้าสู่ระบบหรือหน้าแรก เราไม่ได้ตรวจรูปแบบของไฟล์ในการรันครั้งนี้
เราพบอะไร?
- 1,240 จาก 10,000 โดเมน (12.4%) เผยแพร่
llms.txt - รายการนี้รวม CDN และโฮสต์ API ที่ไม่ได้ให้บริการเว็บไซต์ ในบรรดา 7,367 โดเมนที่หน้าแรกตอบเป็น HTML มี 1,233 โดเมน (16.7%) ที่เผยแพร่ไฟล์นี้
- เกือบทั้งหมดมี robots.txt ด้วย คือ 1,229 จาก 1,240 โดเมน
เว็บไซต์ที่ใหญ่กว่าเผยแพร่มากกว่าหรือไม่?
ใช่ และต่างกันชัดเจน เราแบ่งเว็บไซต์ (โดเมนที่หน้าแรกตอบเป็น HTML) ตามอันดับ Tranco:
- อันดับ 1 ถึง 1,000: 22.6% เผยแพร่ llms.txt (149 จาก 658 เว็บไซต์)
- อันดับ 1,001 ถึง 3,000: 18.2% (264 จาก 1,449)
- อันดับ 3,001 ถึง 10,000: 15.6% (820 จาก 5,260)
ใครเผยแพร่ไฟล์นี้บ้าง?
ในบรรดา 6,192 โดเมนที่มี robots.txt โดเมนที่เผยแพร่ llms.txt มีลักษณะต่างจากที่เหลือ:
- บล็อกครอว์เลอร์ฝึกโมเดล AI อย่างน้อยหนึ่งตัวในสัดส่วน 11.8% เทียบกับ 26.0% ของโดเมนที่ไม่มี llms.txt
- บล็อกครอว์เลอร์ค้นหาหรือครอว์เลอร์ผู้ใช้ของ AI อย่างน้อยหนึ่งตัวในสัดส่วน 1.4% เทียบกับ 15.0%
- ใช้บรรทัด
Content-Signalในสัดส่วน 12.9% เทียบกับ 4.9%
กล่าวอีกอย่างคือ เว็บไซต์ที่ใส่ใจเผยแพร่ llms.txt ส่วนใหญ่เป็นเว็บไซต์ที่เปิดทางให้ครอว์เลอร์ AI อยู่แล้ว
ข้อมูลนี้ไม่ได้บอกอะไร?
ข้อมูลแสดงความสัมพันธ์ ไม่ใช่สาเหตุ เว็บไซต์ที่จริงจังกับการมองเห็นใน AI อาจเผยแพร่ llms.txt และเปิด robots.txt ไว้ด้วย แต่นั่นไม่ได้หมายความว่าไฟล์นี้ทำให้เกิดความแตกต่าง ตัวเลขนี้ยังวัดเฉพาะการเผยแพร่ ไม่ได้บอกว่าผู้ช่วย AI ตัวใดอ่านไฟล์นี้ และครอว์เลอร์ค้นหา AI รายใหญ่ก็ไม่ได้ระบุว่าใช้มัน
ตัวเลขอธิบายกฎของหน้าแรกและไฟล์ที่ที่อยู่เดียวในวันเดียวสำหรับโดเมนยอดนิยมที่สุด เว็บไซต์ที่เล็กกว่าอาจต่างออกไป
ควรเผยแพร่หรือไม่?
ทำได้ง่ายและไม่เสียหาย คือสรุปสั้น ๆ ของเว็บไซต์ในรูปแบบ Markdown พร้อมรายการหน้าที่มีประโยชน์ที่สุด ให้เนื้อหาถูกต้องและลิงก์ใช้งานได้ อย่าถือว่าเป็นสิ่งทดแทนการเปิดทางให้ครอว์เลอร์ เพราะ llms.txt บนเว็บไซต์ที่ไฟร์วอลล์ปฏิเสธครอว์เลอร์ หรือ robots.txt ห้ามไว้ ไม่ช่วยใครเลย
ขั้นตอนถัดไป
- ตัวทดสอบและตัวตรวจสอบ robots.txt สำหรับ AI crawler
- ตัวตรวจสอบและตัวตรวจความถูกต้อง llms.txt
- ดูตัวอย่างรายงานฉบับเต็ม
- การติดตาม AI crawler
- แพ็กเกจและราคา
คำถามที่พบบ่อย
เว็บไซต์ร้อยละเท่าไรที่มี llms.txt?
ในบรรดา 10,000 โดเมนยอดนิยมที่เราตรวจ 12.4% เผยแพร่ไฟล์นี้ ในบรรดาโดเมนที่หน้าแรกตอบเป็น HTML สัดส่วนคือ 16.7% และสูงกว่านั้นในเว็บไซต์ที่ใหญ่ที่สุด คือ 22.6% ใน 1,000 อันดับแรก
เว็บไซต์ที่มี llms.txt อนุญาตครอว์เลอร์ AI บ่อยกว่าหรือไม่?
ในข้อมูลของเรา ใช่ เว็บไซต์เหล่านี้บล็อกครอว์เลอร์ค้นหาและครอว์เลอร์ผู้ใช้ของ AI ในสัดส่วน 1.4% เทียบกับ 15.0% ของเว็บไซต์ที่ไม่มี นี่เป็นเพียงความสัมพันธ์ ไม่ได้แสดงว่าไฟล์นี้เปลี่ยนวิธีที่ครอว์เลอร์ปฏิบัติต่อเว็บไซต์
llms.txt ช่วยให้ผู้ช่วย AI อ้างอิงฉันหรือไม่?
ข้อมูลของเราตอบไม่ได้ เพราะนับเพียงว่าเว็บไซต์ใดเผยแพร่ไฟล์ ไม่ได้นับว่าผู้ช่วย AI ใช้ไฟล์หรือไม่ และครอว์เลอร์ค้นหา AI รายใหญ่ไม่ได้ระบุว่าอ่านไฟล์นี้ หน้าเว็บที่ครอว์เลอร์เข้าถึงได้และการเปิดทางเข้าถึงสำคัญกว่า
รู้ได้อย่างไรว่าเว็บไซต์มี llms.txt จริง?
ขอ /llms.txt แล้วตรวจว่าที่อยู่นั้นตอบด้วย 200 และมีเนื้อหาเป็นข้อความที่ไม่ใช่หน้า HTML การเปลี่ยนเส้นทางไปหน้าแรกหรือหน้าเข้าสู่ระบบไม่ถือเป็น llms.txt
แหล่งอ้างอิง
- llmstxt.org: ไฟล์ /llms.txt
- AISeeWhy: รายงานการเข้าถึงของครอว์เลอร์ AI พฤศจิกายน 2026
- Tranco: อันดับเว็บไซต์ยอดนิยมเพื่อการวิจัย
- Google Search Central: ฟีเจอร์ AI และเว็บไซต์ของคุณ
- OpenAI: ภาพรวมครอว์เลอร์ของ OpenAI