llms-full.txt کیا ہے، اور کیا اسے llms.txt کے ساتھ شائع کرنا چاہیے؟

شائع شدہ

مختصر جواب

llms-full.txt ایک واحد ٹیکسٹ فائل ہے جس میں سائٹ کی دستاویزات کا پورا متن ہوتا ہے، عموماً Markdown میں، اور یہ مختصر /llms.txt انڈیکس کے ساتھ شائع ہوتی ہے۔ یہ llmstxt.org پر llms.txt تجویز کا حصہ نہیں بلکہ ایک رواج ہے جسے دستاویزات کی سائٹس نے اپنایا۔ اگر آپ ڈویلپر دستاویزات چلاتے ہیں جنہیں ایجنٹس ایک ساتھ لوڈ کرتے ہیں تو اسے شائع کریں؛ زیادہ تر کاروباری سائٹس کے لیے اچھا llms.txt اور صاف صفحات کافی ہیں۔

llms.txt کیا ہے، اس پر ہمارا مضمون خود انڈیکس فائل کا احاطہ کرتا ہے: اس کا فارمیٹ، یہ کہاں سے آئی اور اسے کون پڑھتا ہے۔ یہ مضمون اس کی بڑی بہن کے بارے میں ہے۔ اگر آپ نے کسی دستاویزات کی سائٹ پر llms-full.txt دیکھا، یا کسی چیکر نے پوچھا کہ کیا آپ کے پاس یہ ہے، تو یہاں بتایا گیا ہے کہ یہ فائل کیا ہے، تجویز کیا کہتی ہے اور کیا نہیں، اور کیا یہ محنت کے قابل ہے۔

اس صفحے پر
  1. کیا llms-full.txt، llms.txt کی تفصیلات کا حصہ ہے؟
  2. llms-full.txt، llms.txt اور .md صفحات سے کیسے مختلف ہے؟
  3. llms-full.txt کون شائع کرتا ہے؟
  4. کیا AI کرالرز llms.txt یا llms-full.txt پڑھتے ہیں؟
  5. llms-full.txt کتنی بڑی ہو سکتی ہے؟
  6. llms-full.txt کیسے بناؤں اور جانچوں؟
  7. کیا llms-full.txt ترجیح ہونی چاہیے؟

کیا llms-full.txt، llms.txt کی تفصیلات کا حصہ ہے؟

نہیں۔ llmstxt.org کی تجویز، جو اب ورژن 2 میں ہے (10 اگست 2026 کو ترمیم شدہ)، صرف llms.txt نام کی فائلوں کی تعریف کرتی ہے، سائٹ کی روٹ پر یا کسی بھی path پر، جہاں فائل اپنے path کے تحت صفحات کا احاطہ کرتی ہے۔ یہ الگ الگ صفحات کے Markdown ورژن بھی تجویز کرتی ہے، صفحے کے URL میں .md جوڑ کر (page.html.md) یا ایکسٹینشن بدل کر (page.md)، اور فائل نام کے بغیر URLs کے لیے index.html.md یا index.md۔

سارا مواد رکھنے والی واحد فائل تفصیلات میں کہیں نہیں۔ ورژن 1 میں llms_txt2ctx نامی ٹول بیان کیا گیا تھا جو llms.txt کو ایک context فائل میں پھیلاتا تھا۔ ورژن 2 نے یہ ٹولنگ تجویز سے ہٹا دی اور اس کے بجائے متوقع استعمال بتایا: ایجنٹس llms.txt پڑھتے یا اس میں سرچ کرتے ہیں، پھر جن لنکس کی ضرورت ہو ان پر جاتے ہیں۔ FastHTML کی دستاویزات، جو تجویز کی اپنی مثال ہیں، اب بھی llms-ctx-full.txt نام کی پھیلائی گئی فائل دیتی ہیں۔

لہٰذا llms-full.txt نام رکھنے کا ایک رواج ہے۔ “سارے صفحات، ایک کے بعد ایک” سے آگے کوئی متفقہ فارمیٹ نہیں۔

llms-full.txt، llms.txt اور .md صفحات سے کیسے مختلف ہے؟

تجویز کا ورژن 2 ایجنٹس کے لیے صفحے کا Markdown ورژن اور اس کا احاطہ کرنے والی llms.txt ڈھونڈنے کا طریقہ شامل کرتا ہے، HTTP ہیڈر میں یا صفحے کے HTML میں معیاری link relations کے ذریعے:

# HTTP response header on https://example.com/docs/setup.html
Link: </docs/setup.html.md>; rel="alternate"; type="text/markdown", </docs/llms.txt>; rel="describedby"

# The same as HTML link elements in the page <head>
<link rel="alternate" type="text/markdown" href="/docs/setup.html.md">
<link rel="describedby" href="/docs/llms.txt">

llms-full.txt کے لیے کوئی ایسا link relation نہیں۔ جو سائٹس اسے شائع کرتی ہیں وہ عموماً اپنی llms.txt سے اس کا لنک دیتی ہیں۔

llms-full.txt کون شائع کرتا ہے؟

زیادہ تر ڈویلپر دستاویزات کی سائٹس۔ جب ہم نے 17 نومبر 2026 کو جانچا تو یہ فائلیں لائیو تھیں:

چاروں API اور پروڈکٹ کی دستاویزات ہیں، جنہیں ڈویلپرز اور کوڈنگ ایجنٹس پڑھتے ہیں۔ 1,000 مقبول ترین ڈومینز کے ہمارے نومبر 2026 کے مطالعے میں ہم نے llms-full.txt نہیں گنی؛ ان میں سے 132 نے llms.txt شائع کی، اور ان میں سے 117 نے llmstxt.org فارمیٹ کی پیروی کی۔

کیا AI کرالرز llms.txt یا llms-full.txt پڑھتے ہیں؟

ہمیں ملنے والی کسی دستاویز کے مطابق نہیں۔ OpenAI، Anthropic اور Perplexity کے کرالر صفحات اپنے بوٹس اور robots.txt ٹوکنز بیان کرتے ہیں، اور ان میں سے کوئی نہیں کہتا کہ یہ کرالرز دوسری سائٹس پر llms.txt یا llms-full.txt پڑھتے ہیں۔ Google کہتا ہے کہ AI Overviews یا AI Mode میں آنے کے لیے نئی machine-readable فائلیں، AI ٹیکسٹ فائلیں یا مارک اپ بنانے کی ضرورت نہیں۔

اپنی دستاویزات کے لیے یہ فائلیں شائع کرنا آپ کی فائلیں پڑھنے جیسا نہیں۔ llmstxt.org کہتا ہے کہ یہ فائلیں سب سے زیادہ سافٹ ویئر دستاویزات کے لیے استعمال ہوتی ہیں، جہاں کوڈنگ ایجنٹس ان کی پیروی کرتے ہیں۔ Chrome کے Lighthouse میں llms.txt آڈٹ ہے، لیکن یہ صرف /llms.txt منگواتے وقت سرور error کو نشان زد کرتا ہے؛ غائب فائل کو غیر متعلق گنتا ہے، اور آڈٹ llms-full.txt کا ذکر نہیں کرتا۔

اگر آپ اپنی سائٹ کے لیے ثبوت چاہتے ہیں تو اپنے سرور لاگز میں /llms-full.txt کی درخواستیں تلاش کریں اور یوزر ایجنٹس دیکھیں۔

llms-full.txt کتنی بڑی ہو سکتی ہے؟

کوئی حد دستاویزی نہیں، کیونکہ کوئی تفصیلات اس فائل کی تعریف نہیں کرتیں۔ عملی حد پڑھنے والا ہے۔ llmstxt.org بتاتا ہے کہ context windows پہلے سے بڑی ہونے کے باوجود زیادہ تر ویب سائٹس کو مکمل سمونے کے لیے اب بھی چھوٹی ہیں۔ کئی میگابائٹس کی فائل ایک بار میں نہیں پڑھی جا سکتی، اس لیے ایجنٹ کو اس میں سرچ کرنا یا اسے حصوں میں پڑھنا پڑتا ہے، اور یہی llms.txt انڈیکس اور .md صفحات پہلے سے ممکن بناتے ہیں۔

اگر آپ پھر بھی اسے شائع کریں:

llms-full.txt کیسے بناؤں اور جانچوں؟

ایک درست llms.txt اور اپنے صفحات کے Markdown ورژنز سے شروع کریں؛ پھر llms-full.txt ایک بلڈ مرحلہ ہے۔ یہ اسکرپٹ آپ کی llms.txt پڑھتا ہے، ہر لنک شدہ .md صفحہ منگواتا ہے اور ہر ایک کی ماخذ لائن کے ساتھ انہیں جوڑتا ہے:

import re
import urllib.request

SITE_INDEX = "https://example.com/llms.txt"
HEADERS = {"User-Agent": "llms-full-builder/1.0"}


def get(url):
    req = urllib.request.Request(url, headers=HEADERS)
    with urllib.request.urlopen(req, timeout=20) as resp:
        return resp.read().decode("utf-8", "replace")


index = get(SITE_INDEX)
links = re.findall(r"^\s*-\s*\[([^\]]+)\]\((https?://[^)\s]+)\)", index, re.M)

parts = [index.strip()]
for title, url in links:
    if not url.endswith(".md"):
        continue  # include only pages that have a clean Markdown version
    parts.append(f"# {title}\nSource: {url}\n\n{get(url).strip()}")

with open("llms-full.txt", "w", encoding="utf-8") as f:
    f.write("\n\n---\n\n".join(parts) + "\n")

print(len(parts) - 1, "pages,", sum(len(p) for p in parts), "characters")

پھر نتیجہ جانچیں۔ فائل کو HTML صفحے کے طور پر نہیں بلکہ text/plain یا text/markdown کے طور پر status 200 لوٹانا چاہیے، اور اس کے صفحات کی تعداد آپ کی llms.txt کے لنکس سے میل کھانی چاہیے۔ مفت AISeeWhy llms.txt جنریٹر انڈیکس لکھنے میں مدد کرتا ہے، اور مفت llms.txt ویلیڈیٹر اسے llmstxt.org فارمیٹ سے جانچتا ہے: عنوان، خلاصہ، حصے اور لنکس، ہر مسئلے کے لائن نمبر کے ساتھ۔ llms-full.txt کا کوئی فارمیٹ نہیں جس سے اسے جانچا جائے، اس لیے اوپر کی جانچیں ہی مفید ہیں۔

کیا llms-full.txt ترجیح ہونی چاہیے؟

زیادہ تر سائٹس کے لیے نہیں۔ دونوں فائلیں تبھی مدد کرتی ہیں جب پڑھنے والا آپ کے صفحات تک پہنچ سکے۔ مفت AISeeWhy جانچ صفحہ براؤزر کے ساتھ 16 AI اور سرچ کرالرز کی طرح منگواتی ہے اور دکھاتی ہے کہ کیا robots.txt، فائر وال یا JavaScript انہیں روکتے ہیں، جو AI میں نمایاں ہونے کے بارے میں کسی بھی ٹیکسٹ فائل سے زیادہ فیصلہ کن ہے۔

اس مسئلے کے حل

مفت ٹولز

اگلے قدم

اکثر پوچھے جانے والے سوالات

کیا llms.txt تجویز، llms-full.txt کو لازمی کرتی ہے؟

نہیں۔ تجویز llms.txt اور صفحات کے Markdown ورژنز کی تعریف کرتی ہے۔ llms-full.txt ایک رواج ہے جس پر کچھ دستاویزات کی سائٹس عمل کرتی ہیں۔

llm.txt اور llms.txt میں کیا فرق ہے؟

تجویز میں فائل کا نام llms.txt ہے، s کے ساتھ۔ /llm.txt پر موجود فائل تجویز کی پیروی نہیں کرتی، اور llms.txt تلاش کرنے والے ٹولز اسے نہیں ڈھونڈ پائیں گے۔

llms-full.txt کہاں رکھنی چاہیے؟

کوئی تفصیلات نہیں بتاتیں۔ اوپر کی مثالیں اسے دستاویزات کی سائٹ کی روٹ پر llms.txt کے ساتھ رکھتی ہیں، اور llms.txt سے اس کا لنک دیتی ہیں تاکہ پڑھنے والے اسے ڈھونڈ سکیں۔

کیا llms-full.txt، Google AI Overviews میں مدد کرتی ہے؟

Google کہتا ہے کہ AI Overviews یا AI Mode میں آنے کے لیے نئی machine-readable فائلوں یا AI ٹیکسٹ فائلوں کی ضرورت نہیں۔ صفحات کا انڈیکس ہونا اور snippet دکھانے کا اہل ہونا ضروری ہے۔

کیا میں llms-full.txt کو llms.txt چیکر سے جانچ سکتا ہوں؟

صرف جزوی طور پر۔ llms.txt چیکر انڈیکس کا فارمیٹ جانچتا ہے، جس کی پیروی مکمل مواد والی فائل نہیں کرتی۔ llms-full.txt کے لیے status code، content type، سائز اور یہ جانچیں کہ یہ آپ کے موجودہ صفحات سے میل کھاتی ہے۔

ماخذ

مزید مضامین