Что такое llms-full.txt и стоит ли публиковать его рядом с llms.txt?
llms-full.txt — это один текстовый файл с полным текстом документации сайта, обычно в Markdown, который публикуют рядом с коротким индексом /llms.txt. Он не входит в предложение llms.txt на llmstxt.org, а представляет собой соглашение, которое приняли сайты с документацией. Публикуйте его, если у вас документация для разработчиков, которую агенты загружают целиком; большинству коммерческих сайтов достаточно хорошего llms.txt и чистых страниц.
Наша статья о том, что такое llms.txt, разбирает сам индексный файл: его формат, происхождение и то, кто его читает. Эта статья — о его старшем брате. Если вы видели llms-full.txt на сайте с документацией или инструмент проверки спросил, есть ли он у вас, вот что это за файл, что говорит и чего не говорит предложение и стоит ли он усилий.
На этой странице
- Входит ли llms-full.txt в спецификацию llms.txt?
- Чем llms-full.txt отличается от llms.txt и страниц .md?
- Кто публикует llms-full.txt?
- Читают ли AI-краулеры llms.txt или llms-full.txt?
- Каким большим может быть llms-full.txt?
- Как собрать и проверить llms-full.txt?
- Стоит ли считать llms-full.txt приоритетом?
Входит ли llms-full.txt в спецификацию llms.txt?
Нет. Предложение на llmstxt.org, сейчас в версии 2 (изменена 10 августа 2026 года), определяет только файлы с именем llms.txt — в корне сайта или по любому пути, причём файл охватывает страницы внутри своего пути. Оно также предлагает Markdown-версии отдельных страниц: по URL страницы с добавленным .md (page.html.md) или с заменённым расширением (page.md), а для URL без имени файла — index.html.md или index.md.
Один файл со всем контентом в спецификации не встречается нигде. Версия 1 описывала инструмент llms_txt2ctx, который разворачивал llms.txt в один файл контекста. Версия 2 убрала этот инструментарий из предложения и вместо этого описывает ожидаемое использование: агенты читают llms.txt или ищут по нему, а затем переходят по нужным ссылкам. Документация FastHTML, собственный пример предложения, по-прежнему отдаёт развёрнутый файл с именем llms-ctx-full.txt.
Так что llms-full.txt — это соглашение об именовании. Согласованного формата, кроме «все страницы подряд», нет.
Чем llms-full.txt отличается от llms.txt и страниц .md?
Версия 2 предложения добавляет способ, которым агенты находят Markdown-версию страницы и охватывающий её llms.txt, с помощью стандартных типов связей в HTTP-заголовке или в HTML страницы:
llms.txt— это индекс: заголовок, краткое описание и списки ссылок. Предложение говорит, что он должен оставаться достаточно маленьким, чтобы помещаться в контекст модели.- Страницы
.md— чистые копии отдельных страниц. Они входят в предложение, и агент загружает только нужные. llms-full.txt— все страницы, объединённые в один файл. Один запрос даёт агенту всё, но ценой размера.
# HTTP response header on https://example.com/docs/setup.html
Link: </docs/setup.html.md>; rel="alternate"; type="text/markdown", </docs/llms.txt>; rel="describedby"
# The same as HTML link elements in the page <head>
<link rel="alternate" type="text/markdown" href="/docs/setup.html.md">
<link rel="describedby" href="/docs/llms.txt"> Аналогичного типа связи для llms-full.txt нет. Сайты, которые его публикуют, обычно ссылаются на него из своего llms.txt.
Кто публикует llms-full.txt?
В основном сайты с документацией для разработчиков. На момент нашей проверки 17 ноября 2026 года были доступны такие файлы:
- Cloudflare:
developers.cloudflare.com/llms-full.txt, около 71 МБ. Его корневой llms.txt весит 17 КБ и ссылается на отдельный llms.txt для каждого продукта. - Anthropic:
platform.claude.com/llms-full.txt, около 53 МБ. llms.txt размером 102 КБ ссылается на него в конце. - OpenAI:
developers.openai.com/llms-full.txt, около 9,7 МБ, в самом файле описан как однофайловый экспорт в Markdown. Его llms.txt весит 6 КБ. - Perplexity:
docs.perplexity.ai/llms-full.txt, около 4 МБ, со строкойSource:, где указан URL каждой страницы. Его llms.txt весит 46 КБ.
Все четыре — документация по API и продуктам, которую читают разработчики и агенты для программирования. В нашем исследовании 1000 самых популярных доменов в ноябре 2026 года мы не учитывали llms-full.txt; llms.txt публиковали 132 из них, и 117 из этих файлов следовали формату llmstxt.org.
Читают ли AI-краулеры llms.txt или llms-full.txt?
Ни в какой найденной нами документации об этом не сказано. Страницы о краулерах OpenAI, Anthropic и Perplexity описывают их ботов и токены robots.txt, и ни одна не говорит, что эти краулеры читают llms.txt или llms-full.txt на других сайтах. Google сообщает, что для появления в AI Overviews или AI Mode не нужно создавать новые машиночитаемые файлы, AI-текстовые файлы или разметку.
Публиковать такие файлы для своей документации — не то же самое, что читать ваши. llmstxt.org говорит, что активнее всего файлы используются в документации по программному обеспечению, где по ним идут агенты для программирования. В Lighthouse от Chrome есть аудит llms.txt, но он отмечает только ошибку сервера при загрузке /llms.txt; отсутствие файла считается неприменимым, а llms-full.txt аудит не упоминает.
Если вам нужны данные по своему сайту, поищите в логах сервера запросы к /llms-full.txt и посмотрите на user agent.
Каким большим может быть llms-full.txt?
Ограничение не задокументировано, потому что файл не определяет ни одна спецификация. Практическое ограничение — читатель. llmstxt.org отмечает, что контекстные окна, хотя и стали больше, всё ещё слишком малы для большинства сайтов целиком. Файл в несколько мегабайт нельзя прочитать за один проход, так что агенту приходится искать по нему или читать частями, а это уже позволяют индекс llms.txt и страницы .md.
Если вы всё же его публикуете:
- Делите большую документацию по продуктам или разделам, как Cloudflare со своими llms.txt для каждого продукта, а не выкладывайте один огромный файл.
- Ставьте URL источника над каждой страницей, чтобы ответ, собранный из файла, всё равно мог сослаться на нужную страницу.
- Включайте только публичный контент. Файл легко скопировать целиком, а правила robots.txt действуют на него как на любой другой URL, включая блокировки краулеров для обучения.
- Пересобирайте его при каждом развёртывании. Устаревшая полная копия хуже, чем никакой, потому что повторяет устаревшие факты в одном удобном месте.
Как собрать и проверить llms-full.txt?
Начните с правильного llms.txt и Markdown-версий ваших страниц; тогда llms-full.txt становится шагом сборки. Этот скрипт читает ваш llms.txt, загружает каждую страницу .md по ссылке и объединяет их, добавляя строку с источником для каждой:
import re
import urllib.request
SITE_INDEX = "https://example.com/llms.txt"
HEADERS = {"User-Agent": "llms-full-builder/1.0"}
def get(url):
req = urllib.request.Request(url, headers=HEADERS)
with urllib.request.urlopen(req, timeout=20) as resp:
return resp.read().decode("utf-8", "replace")
index = get(SITE_INDEX)
links = re.findall(r"^\s*-\s*\[([^\]]+)\]\((https?://[^)\s]+)\)", index, re.M)
parts = [index.strip()]
for title, url in links:
if not url.endswith(".md"):
continue # include only pages that have a clean Markdown version
parts.append(f"# {title}\nSource: {url}\n\n{get(url).strip()}")
with open("llms-full.txt", "w", encoding="utf-8") as f:
f.write("\n\n---\n\n".join(parts) + "\n")
print(len(parts) - 1, "pages,", sum(len(p) for p in parts), "characters") Затем проверьте результат. Файл должен отдаваться со статусом 200 как text/plain или text/markdown, а не как HTML-страница, а число страниц в нём должно совпадать со ссылками в вашем llms.txt. Бесплатный генератор llms.txt от AISeeWhy помогает написать индекс, а бесплатный валидатор llms.txt проверяет его по формату llmstxt.org: заголовок, краткое описание, разделы и ссылки, с номерами строк для каждой проблемы. Для llms-full.txt формата, по которому можно проверять, нет, так что полезны проверки, описанные выше.
Стоит ли считать llms-full.txt приоритетом?
Для большинства сайтов нет. Оба файла помогают, только когда читатель может добраться до ваших страниц. Бесплатная проверка AISeeWhy загружает страницу как 16 AI- и поисковых краулеров рядом с браузером и показывает, не останавливают ли их robots.txt, файрвол или JavaScript, а это значит для видимости в AI больше, чем любой из этих текстовых файлов.
Исправления для этой проблемы
- Нет llms.txt
- llms.txt не начинается с заголовка
- Страницы нет в llms.txt
- llms.txt слишком большой: 1200 КБ
Что дальше
- Тестер и проверка robots.txt для AI-краулеров
- Проверка и валидатор llms.txt
- Посмотреть пример полного отчёта
- Мониторинг AI-краулеров
- Тарифы и цены
Частые вопросы
Требует ли предложение llms.txt файла llms-full.txt?
Нет. Предложение определяет llms.txt и Markdown-версии страниц. llms-full.txt — соглашение, которому следуют некоторые сайты с документацией.
В чём разница между llm.txt и llms.txt?
Имя файла в предложении — llms.txt, с буквой s. Файл по адресу /llm.txt предложению не соответствует, и инструменты, которые ищут llms.txt, его не найдут.
Где должен лежать llms-full.txt?
Ни одна спецификация этого не говорит. В примерах выше он лежит рядом с llms.txt в корне сайта документации, и llms.txt ссылается на него, чтобы читатели могли его найти.
Помогает ли llms-full.txt с Google AI Overviews?
Google сообщает, что для появления в AI Overviews или AI Mode не нужны новые машиночитаемые файлы или AI-текстовые файлы. Страницы должны быть проиндексированы и пригодны для показа сниппета.
Можно ли проверить llms-full.txt валидатором llms.txt?
Лишь отчасти. Валидатор llms.txt проверяет формат индекса, которому файл с полным контентом не следует. Для llms-full.txt проверьте код статуса, тип контента, размер и соответствие текущим страницам.
Источники
- llmstxt.org: The /llms.txt file, v2
- llmstxt.org: Changes
- Chrome for Developers: Lighthouse llms.txt audit
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity: Perplexity crawlers
- Cloudflare: llms-full.txt
- Anthropic: llms-full.txt
- OpenAI: llms-full.txt
- Perplexity: llms-full.txt
- AISeeWhy: отчёт о доступе AI-краулеров, 2026-11