ما هو llms-full.txt، وهل ينبغي أن تنشره بجانب llms.txt؟
llms-full.txt ملف نصي واحد يضم النص الكامل لوثائق موقع ما، عادةً بصيغة Markdown، ويُنشر بجانب الفهرس القصير /llms.txt. وهو ليس جزءاً من مقترح llms.txt على llmstxt.org، بل عرف اعتمدته مواقع الوثائق. انشره إن كنت تدير وثائق للمطورين يحمّلها الوكلاء دفعة واحدة؛ أما معظم مواقع الأعمال فيكفيها ملف llms.txt جيد وصفحات نظيفة.
يتناول مقالنا عن llms.txt ملف الفهرس نفسه: صيغته ومن أين جاء ومن يقرؤه. أما هذا المقال فعن شقيقه الأكبر. إن رأيت llms-full.txt في موقع وثائق، أو سألتك أداة فحص إن كان لديك واحد، فإليك ما هو هذا الملف، وما يقوله المقترح وما لا يقوله، وهل يستحق العناء.
في هذه الصفحة
هل llms-full.txt جزء من مواصفة llms.txt؟
لا. المقترح على llmstxt.org، وهو الآن في الإصدار 2 (المعدّل في 10 أغسطس 2026)، لا يعرّف إلا ملفات باسم llms.txt، في جذر الموقع أو في أي مسار، بحيث يغطي الملف الصفحات الواقعة تحت مساره. ويقترح أيضاً نسخ Markdown من الصفحات المنفردة، على عنوان الصفحة مع إضافة .md (page.html.md) أو مع استبدال الامتداد (page.md)، وindex.html.md أو index.md للعناوين التي ليس فيها اسم ملف.
أما ملف واحد يضم كل المحتوى فلا يرد في أي موضع من المواصفة. وصف الإصدار 1 أداة اسمها llms_txt2ctx توسّع llms.txt إلى ملف سياق واحد. وأزال الإصدار 2 هذه الأدوات من المقترح وذكر بدلاً منها الاستخدام المتوقع: يقرأ الوكلاء llms.txt أو يبحثون فيه، ثم يتبعون الروابط التي يحتاجونها. وما زالت وثائق FastHTML، وهي المثال الذي يستخدمه المقترح نفسه، تقدّم ملفاً موسّعاً اسمه llms-ctx-full.txt.
إذن llms-full.txt عرف في التسمية. ولا توجد صيغة متفق عليها أبعد من «كل الصفحات، الواحدة تلو الأخرى».
كيف يختلف llms-full.txt عن llms.txt وصفحات .md؟
يضيف الإصدار 2 من المقترح طريقة يجد بها الوكلاء نسخة Markdown من الصفحة وملف llms.txt الذي يغطيها، باستخدام علاقات روابط قياسية في ترويسة HTTP أو في HTML الصفحة:
llms.txtفهرس: عنوان وملخص وقوائم روابط. ويقول المقترح إنه يجب أن يبقى صغيراً بما يكفي ليتسع في سياق النموذج.- صفحات
.mdنسخ نظيفة من صفحات منفردة. وهي جزء من المقترح، ويجلب الوكيل منها ما يحتاج إليه فقط. llms-full.txtكل الصفحات مجموعة في ملف واحد. طلب واحد يعطي الوكيل كل شيء، على حساب الحجم.
# HTTP response header on https://example.com/docs/setup.html
Link: </docs/setup.html.md>; rel="alternate"; type="text/markdown", </docs/llms.txt>; rel="describedby"
# The same as HTML link elements in the page <head>
<link rel="alternate" type="text/markdown" href="/docs/setup.html.md">
<link rel="describedby" href="/docs/llms.txt"> لا توجد علاقة روابط مقابلة لـ llms-full.txt. والمواقع التي تنشره تربط به عادةً من ملف llms.txt.
من ينشر llms-full.txt؟
مواقع وثائق المطورين في الغالب. حين فحصنا في 17 نوفمبر 2026، كانت هذه الملفات منشورة:
- Cloudflare:
developers.cloudflare.com/llms-full.txt، نحو 71 MB. وملف llms.txt الجذري لديها 17 KB ويربط بملف llms.txt منفصل لكل منتج. - Anthropic:
platform.claude.com/llms-full.txt، نحو 53 MB. ويربط به ملف llms.txt البالغ 102 KB في نهايته. - OpenAI:
developers.openai.com/llms-full.txt، نحو 9.7 MB، ويوصف في الملف بأنه تصدير Markdown في ملف واحد. وملف llms.txt لديها 6 KB. - Perplexity:
docs.perplexity.ai/llms-full.txt، نحو 4 MB، مع سطرSource:يذكر عنوان كل صفحة. وملف llms.txt لديها 46 KB.
الأربعة كلها وثائق API ومنتجات يقرؤها المطورون ووكلاء البرمجة. لم نحصِ llms-full.txt في دراستنا لشهر نوفمبر 2026 عن أشهر 1,000 نطاق؛ نشر 132 منها ملف llms.txt، واتبع 117 منها صيغة llmstxt.org.
هل تقرأ زواحف الذكاء الاصطناعي llms.txt أو llms-full.txt؟
ليس وفق أي وثائق استطعنا العثور عليها. تصف صفحات الزواحف لدى OpenAI وAnthropic وPerplexity بوتاتها ورموزها في robots.txt، ولا تقول أي منها إن تلك الزواحف تقرأ llms.txt أو llms-full.txt في مواقع أخرى. وتقول Google إنك لا تحتاج إلى إنشاء ملفات جديدة يقرؤها الحاسوب أو ملفات نصية للذكاء الاصطناعي أو ترميز للظهور في AI Overviews أو AI Mode.
ونشر هذه الملفات لوثائقها الخاصة ليس كقراءة ملفاتك. تقول llmstxt.org إن الملفات تُستخدم أكثر ما تُستخدم في وثائق البرمجيات، حيث يتبعها وكلاء البرمجة. ويتضمن Lighthouse في Chrome تدقيقاً لملف llms.txt، لكنه لا يُبلغ إلا عن خطأ خادم عند جلب /llms.txt؛ ويُعدّ غياب الملف حالة لا تنطبق، ولا يذكر التدقيق llms-full.txt.
وإن أردت دليلاً من موقعك، فابحث في سجلات الخادم عن الطلبات إلى /llms-full.txt وانظر إلى وكلاء المستخدم.
ما الحجم الذي يمكن أن يبلغه llms-full.txt؟
لا يوجد حد موثّق، لأنه لا توجد مواصفة تعرّف الملف. والحد العملي هو القارئ. تنبّه llmstxt.org إلى أن نوافذ السياق، وإن صارت أكبر من قبل، ما زالت أصغر من أن تتسع لمعظم المواقع كاملة. والملف الذي يبلغ عدة ميغابايت لا يمكن قراءته دفعة واحدة، فعلى الوكيل أن يبحث فيه أو يقرأه على أجزاء، وهذا ما يتيحه أصلاً فهرس llms.txt وصفحات .md.
وإن نشرته رغم ذلك:
- قسّم الوثائق الكبيرة حسب المنتج أو القسم، كما تفعل Cloudflare بملفات llms.txt لكل منتج، بدلاً من نشر ملف واحد ضخم.
- ضع عنوان المصدر فوق كل صفحة، حتى تظل الإجابة المبنية من الملف قادرة على الإشارة إلى الصفحة الصحيحة.
- لا تُدرج إلا المحتوى العام. فالملف سهل النسخ بالكامل، وتنطبق عليه قواعد robots.txt كأي عنوان آخر، بما فيها حظر زواحف التدريب.
- أعد توليده مع كل نشر. فالنسخة الكاملة القديمة أسوأ من عدم وجودها، لأنها تكرر حقائق قديمة في مكان واحد سهل الوصول.
كيف أولّد llms-full.txt وأفحصه؟
ابدأ من ملف llms.txt صالح ونسخ Markdown من صفحاتك؛ ويصبح llms-full.txt عندها خطوة في عملية البناء. يقرأ هذا السكربت ملف llms.txt، ويجلب كل صفحة .md مرتبطة، ويجمعها مع سطر مصدر لكل منها:
import re
import urllib.request
SITE_INDEX = "https://example.com/llms.txt"
HEADERS = {"User-Agent": "llms-full-builder/1.0"}
def get(url):
req = urllib.request.Request(url, headers=HEADERS)
with urllib.request.urlopen(req, timeout=20) as resp:
return resp.read().decode("utf-8", "replace")
index = get(SITE_INDEX)
links = re.findall(r"^\s*-\s*\[([^\]]+)\]\((https?://[^)\s]+)\)", index, re.M)
parts = [index.strip()]
for title, url in links:
if not url.endswith(".md"):
continue # include only pages that have a clean Markdown version
parts.append(f"# {title}\nSource: {url}\n\n{get(url).strip()}")
with open("llms-full.txt", "w", encoding="utf-8") as f:
f.write("\n\n---\n\n".join(parts) + "\n")
print(len(parts) - 1, "pages,", sum(len(p) for p in parts), "characters") ثم افحص النتيجة. يجب أن يعيد الملف الحالة 200 بنوع text/plain أو text/markdown، لا صفحة HTML، وأن يطابق عدد صفحاته الروابط في ملف llms.txt. يساعدك مولّد llms.txt المجاني من AISeeWhy على كتابة الفهرس، ويفحصه مدقق llms.txt المجاني وفق صيغة llmstxt.org: العنوان والملخص والأقسام والروابط، مع رقم السطر لكل مشكلة. أما llms-full.txt فليست له صيغة يُدقَّق وفقها، لذا فالفحوص المذكورة أعلاه هي المفيدة.
هل ينبغي أن يكون llms-full.txt أولوية؟
لمعظم المواقع، لا. فالملفان لا يفيدان إلا بعد أن يستطيع القارئ الوصول إلى صفحاتك. يجلب فحص AISeeWhy المجاني الصفحة بصفتها 16 زاحف ذكاء اصطناعي وبحث إلى جانب متصفح، ويُظهر ما إذا كان robots.txt أو جدار الحماية أو JavaScript يوقفها، وهذا يحدد الظهور في الذكاء الاصطناعي أكثر من أي من الملفين النصيين.
إصلاحات لهذه المشكلة
الخطوات التالية
- أداة اختبار وفحص robots.txt لزواحف الذكاء الاصطناعي
- فاحص ومدقق llms.txt
- اطّلع على مثال لتقرير كامل
- مراقبة زواحف الذكاء الاصطناعي
- الخطط والأسعار
الأسئلة الشائعة
هل يشترط مقترح llms.txt وجود llms-full.txt؟
لا. يعرّف المقترح llms.txt ونسخ Markdown من الصفحات. أما llms-full.txt فعرف تتبعه بعض مواقع الوثائق.
ما الفرق بين llm.txt وllms.txt؟
اسم الملف في المقترح هو llms.txt بحرف s. والملف الموجود في /llm.txt لا يتبع المقترح، ولن تجده الأدوات التي تبحث عن llms.txt.
أين يوضع llms-full.txt؟
لا تحدد ذلك أي مواصفة. الأمثلة أعلاه تضعه بجانب llms.txt في جذر موقع الوثائق، وتربط به من llms.txt حتى يجده القراء.
هل يساعد llms-full.txt في الظهور في Google AI Overviews؟
تقول Google إنك لا تحتاج إلى ملفات جديدة يقرؤها الحاسوب أو ملفات نصية للذكاء الاصطناعي للظهور في AI Overviews أو AI Mode. يجب أن تكون الصفحات مفهرسة ومؤهلة لعرض مقتطف.
هل يمكنني فحص llms-full.txt بمدقق llms.txt؟
جزئياً فقط. يتحقق مدقق llms.txt من صيغة الفهرس، وهي صيغة لا يتبعها ملف المحتوى الكامل. أما llms-full.txt فافحص رمز الحالة ونوع المحتوى والحجم وتطابقه مع صفحاتك الحالية.
المصادر
- llmstxt.org: The /llms.txt file, v2
- llmstxt.org: Changes
- Chrome for Developers: Lighthouse llms.txt audit
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity: Perplexity crawlers
- Cloudflare: llms-full.txt
- Anthropic: llms-full.txt
- OpenAI: llms-full.txt
- Perplexity: llms-full.txt
- AISeeWhy: تقرير وصول زواحف الذكاء الاصطناعي، 2026-11