12 способов добиться, чтобы AI-ответы цитировали ваш сайт (2027)
Разрешите поисковые краулеры каждого ассистента и убедитесь, что файрвол отдаёт им настоящую страницу с текстом в HTML. Затем отвечайте на вопрос покупателя в первых строках, пишите факты обычным текстом, добавьте данные из первых рук, покажите, кто и когда публикует, используйте соответствующий JSON-LD и честно присутствуйте на других сайтах и в товарных фидах.
Ни один вендор не продаёт цитирование, и никто не может его гарантировать. Зато вендоры публикуют, как их краулеры добираются до страниц, что им нужно, чтобы их прочитать, и на что они смотрят, когда выбирают источники. Этот список собирает задокументированные пункты в том порядке, в котором их стоит проходить. Первые четыре решают, может ли ассистент вообще использовать вашу страницу; остальные решают, окажется ли она лучшим ответом из найденных.
На этой странице
- Какие из этих способов важнее всего, если коротко?
- 1. Разрешите поисковые и пользовательские краулеры в robots.txt
- 2. Пусть файрвол отдаёт AI-краулерам ту же страницу, что и браузеру
- 3. Разместите основной текст в HTML, который отдаёт сервер
- 4. Держите страницы в индексе Google и с правом на сниппет
- 5. Отвечайте на вопрос в первых строках страницы
- 6. Делайте заголовками вопросы ваших покупателей
- 7. Публикуйте оригинальное, то, что другие не скопируют
- 8. Пишите цены, характеристики и адреса обычным текстом
- 9. Показывайте, кто публикует страницу и когда она менялась
- 10. Добавьте JSON-LD, совпадающий с видимым текстом
- 11. Добейтесь точного описания на других сайтах
- 12. Поддерживайте товарные фиды и профили компании в актуальном виде
- Как мы выбирали пункты и что оставили за бортом
Какие из этих способов важнее всего, если коротко?
Двигайтесь сверху вниз. Следующий пункт не поможет, пока не выполнен предыдущий, а первые три проверяются за минуты.
- 1. Разрешить поисковые краулеры: усилия небольшие, около 15 минут, нужно для каждого ассистента.
- 2. Пропустить их через файрвол к странице: усилия от небольших до средних, нужно при CDN или защите от ботов.
- 3. Текст в исходном HTML: проверить просто, исправить в клиентском приложении сложно.
- 4. Индексация и право на сниппет: усилия небольшие, нужно для Google AI Overviews и AI Mode.
- 5. Ответ в первых строках: усилия небольшие на страницу, касается каждой страницы, которую вы хотите видеть в цитатах.
- 6. Вопросы покупателей как заголовки: усилия небольшие на страницу.
- 7. Что-то оригинальное: усилия большие, главная причина цитировать вас, а не других.
- 8. Факты обычным текстом: усилия небольшие, важнее всего для цен, характеристик и адресов.
- 9. Издатель и даты: усилия небольшие, одна правка шаблона.
- 10. Соответствующий JSON-LD: усилия средние, один шаблон на тип страницы.
- 11. Честные упоминания на других сайтах: усилия большие, результат медленный и не полностью в ваших руках.
- 12. Товарные и локальные фиды: усилия средние, только для магазинов и местного бизнеса.
1. Разрешите поисковые и пользовательские краулеры в robots.txt
Каждый ассистент читает веб через собственных агентов, а robots.txt решает, кому из них можно сканировать сайт. Если поисковый краулер запрещён, ассистенту нечего у вас цитировать.
Разрешить нужно такие токены: OAI-SearchBot для поиска ChatGPT, Claude-SearchBot и Claude-User для Claude, PerplexityBot для Perplexity и Googlebot для Google AI Overviews и AI Mode. OpenAI пишет, что сайты, закрытые для OAI-SearchBot, не будут показаны в ответах поиска ChatGPT, хотя могут появляться как навигационные ссылки. Краулеры для обучения, например GPTBot и ClaudeBot, это отдельные токены, поэтому можно запретить обучение и при этом оставить поиск. В нашем исследовании 1 000 самых популярных доменов 19,5% из 518 сайтов, отдавших robots.txt, закрывали главную страницу хотя бы для одного поискового или пользовательского AI-краулера.
Группа, в которой назван краулер, заменяет для него группу User-agent: *, поэтому проверяйте каждую именованную группу, а не только общую. OpenAI и Perplexity сообщают, что изменения доходят до их систем примерно за 24 часа.
Подходит для: любого сайта. В нашем руководстве по robots.txt для AI-краулеров есть полные примеры, а руководство о том, как запретить обучение AI и остаться в AI-поиске, показывает это разделение.
2. Пусть файрвол отдаёт AI-краулерам ту же страницу, что и браузеру
robots.txt всего лишь просьба. CDN, WAF или защита от ботов всё равно могут ответить краулеру кодом 403, 429 или страницей-проверкой, хотя в вашем браузере страница открывается нормально.
Anthropic пишет, что её боты не пытаются обходить CAPTCHA, так что страница-проверка заканчивает визит. OpenAI, Anthropic и Perplexity публикуют IP-адреса своих агентов: openai.com/searchbot.json, claude.com/crawling/bots.json и perplexity.ai/perplexitybot.json. Разрешайте эти диапазоны, а не доверяйте одной строке user agent, которую может подделать кто угодно.
Можно пропустить, если: у сайта вообще нет CDN, файрвола или защиты от ботов. Даже тогда проверьте всё один раз после следующей смены хостинга. Наше руководство о том, как Cloudflare блокирует AI-краулеры, разбирает самый частый случай.
3. Разместите основной текст в HTML, который отдаёт сервер
Краулер, который не выполняет JavaScript, видит только HTML из ответа сервера. Если ваш ответ добавляют скрипты позже, такой краулер получит пустую страницу.
Google выполняет JavaScript для Поиска, но всё равно рекомендует серверный рендеринг или пререндеринг, потому что не все боты умеют его запускать. OpenAI, Anthropic и Perplexity в документации к своим краулерам не пишут, что их агенты выполняют JavaScript, поэтому безопаснее считать, что они читают только исходный HTML. Проверьте это: скачайте сырой HTML и найдите в нём предложение из своего ответа: curl -s https://example.com/page/ | grep -c "a sentence from the page". Результат 0 означает, что текста там нет.
Можно пропустить, если: страницы создаёт классическая CMS или генератор статических сайтов; обычно с ними всё в порядке. Владельцам одностраничных приложений стоит прочитать наше руководство о JavaScript-контенте и AI-краулерах.
4. Держите страницы в индексе Google и с правом на сниппет
Google AI Overviews и AI Mode построены на Google Поиске. Google пишет, что страница должна быть проиндексирована и иметь право показываться со сниппетом, а дополнительных технических требований нет.
Поэтому действуют обычные блокеры: noindex, оставшийся со стейджинга, правило nosnippet или очень маленькое значение max-snippet. В документации Google о метатеге robots сказано, что nosnippet также запрещает использовать контент как прямой источник для AI Overviews и AI Mode. Проверьте индексацию страницы инструментом проверки URL в Search Console. Для Microsoft Copilot в Bing Webmaster Tools есть отчёт AI Performance, который показывает, как часто цитируют ваши страницы.
Подходит для: любого сайта, который хочет появляться в AI-функциях Google. Наша статья о Google-Extended объясняет, почему запрет этого токена не убирает вас из AI Overviews.
5. Отвечайте на вопрос в первых строках страницы
Дайте прямой ответ в двух-трёх предложениях сразу под H1, а потом объясняйте. Ассистент, который сравнивает несколько источников, найдёт ваш ответ без чтения всей страницы, а читатель получит его сразу.
В руководстве Google по генеративным AI-функциям сказано, что не нужно дробить контент на мелкие куски или переписывать его для AI: системы Google понимают синонимы и длинные страницы с несколькими темами. Ответ в начале не уловка для машин, а понятная для людей страница, которую к тому же легко цитировать. Пишите ответ законченным утверждением, понятным и без контекста, и называйте предмет прямо, а не «он» или «это».
Подходит для: руководств, страниц товаров, страниц с ценами и FAQ. Можно пропустить, если: страница представляет собой инструмент или форму, где ответом служит сам инструмент.
6. Делайте заголовками вопросы ваших покупателей
Заголовки, совпадающие с реальными вопросами, подсказывают и читателю, и краулеру, на что отвечает каждая часть страницы. «Сколько стоит один пользователь?» проще сопоставить с вопросом, чем «Наша философия цен».
Выпишите 10–30 вопросов, которые покупатели задают, ещё не зная вашего названия, теми словами, какими их задают, и дайте каждому заголовок с прямым ответом под ним. Не набивайте текст дополнительными вариантами ключевых слов: Google пишет, что его системы понимают смысл и для AI-поиска не нужны дополнительные длинные ключевые запросы.
Подходит для: длинных руководств и страниц сравнения. Можно пропустить, если: короткая страница отвечает на один вопрос; эту работу уже делает H1.
7. Публикуйте оригинальное, то, что другие не скопируют
У ассистента мало причин цитировать страницу, которая повторяет десяток других. Руководство Google предостерегает от типового контента на общеизвестных фактах и просит уникальной точки зрения, например опыта из первых рук.
Оригинальный материал это ваши собственные замеры, результаты тестов, собранные вами цены, реальные вопросы клиентов с вашими ответами, скриншоты шагов и данные вашего продукта. Рекомендации Google о полезном контенте спрашивают, даёт ли страница оригинальную информацию, репортаж, исследование или анализ. Укажите, как и когда вы получили цифры, и ссылайтесь на первоисточники для всех утверждений, которые вы не измеряли сами.
Подходит для: сайтов, которые конкурируют со множеством похожих страниц. Можно пропустить, если: оригинального пока нет; сначала доведите пункты 1–6 и собирайте данные по ходу работы.
8. Пишите цены, характеристики и адреса обычным текстом
Факты, спрятанные в картинках, PDF, слайдерах или вкладках, которые загружаются позже, любому краулеру трудно прочитать. Пишите их текстом на странице, с единицами измерения и валютой.
«От $19 за пользователя в месяц при оплате за год» можно процитировать. Цену, которая есть только внутри виджета-калькулятора, нельзя. То же касается часов работы, поддерживаемых стран, лимитов на размер файлов и номеров версий. Google относит хранение важного контента в текстовом виде к лучшим практикам для AI-функций.
Подходит для: страниц с ценами, товарами, услугами и адресами.
9. Показывайте, кто публикует страницу и когда она менялась
И читатели, и ассистенты учитывают, кто стоит за утверждением и насколько оно актуально. Сделайте и то и другое видимым.
Показывайте подписанную дату, например «Обновлено 19 ноября 2026», и ставьте те же даты в datePublished и dateModified в разметке Article или BlogPosting; Google просит, чтобы видимые даты и даты в разметке совпадали. Назовите издателя и дайте ссылку на страницу «О нас». Не меняйте даты без изменения содержания: рекомендации Google о полезном контенте называют смену дат ради видимости свежести тревожным признаком.
Подходит для: статей, руководств и документации.
10. Добавьте JSON-LD, совпадающий с видимым текстом
Структурированные данные в машиночитаемом виде сообщают, о чём страница: организация, статья, товар и его цена. Они убирают догадки, но это не переключатель.
Google пишет, что для его AI-функций особая разметка не нужна и что структурированные данные должны совпадать с видимым текстом. Используйте Organization один раз, со ссылками sameAs на официальные профили, и Article, Product или SoftwareApplication на каждой странице. Разметка, которая заявляет цену или рейтинг, которых нет на странице, это проблема, а не плюс. Проверьте результат в инструменте «Проверка расширенных результатов» (Rich Results Test) или в Schema Markup Validator.
Подходит для: сайтов с товарами, ценами или большим количеством статей. В нашем руководстве по структурированным данным для AI-ответов есть готовые примеры.
11. Добейтесь точного описания на других сайтах
Ассистенты читают не только ваши страницы. Когда они рекомендуют товар или компанию, они часто цитируют отзывы, каталоги, статьи-сравнения и обсуждения на форумах, поэтому ваше отсутствие там это пробел, который никакая правка на сайте не закроет.
OpenAI пишет, что при выборе товаров ChatGPT учитывает структурированные метаданные от собственных и сторонних поставщиков и другой сторонний контент. Убедитесь, что существующие упоминания описывают вас верно и единообразно: название, категория, ценовой диапазон, местоположение. Не покупайте и не подделывайте упоминания. В руководстве Google сказано, что погоня за неестественными упоминаниями в сети не так полезна, как может показаться, а фальшивые отзывы нарушают правила большинства площадок.
Подходит для: брендов, товаров и местного бизнеса. Наша статья о том, почему AI рекомендует конкурента, показывает, как найти источники, которые ассистенты цитируют в вашей категории.
12. Поддерживайте товарные фиды и профили компании в актуальном виде
Некоторые ответы строятся из структурированных каталогов, а не из просканированных страниц. Для магазинов и местного бизнеса такие каталоги это прямой путь в ответы.
Google пишет, что фиды Merchant Center могут сделать товары видимыми в AI-ответах, а данные Business Profile делают то же для местного бизнеса и услуг. OpenAI позволяет компаниям отправлять товарные фиды для поиска товаров в ChatGPT через свой Business Hub. Держите цены и наличие в этих фидах такими же, как на сайте: расхождение даёт ассистенту два ответа на выбор.
Можно пропустить, если: вы не продаёте физические товары и у вас нет точки, куда приходят клиенты. Наш список способов попасть с товарами в AI-ответы разбирает это подробно.
Как мы выбирали пункты и что оставили за бортом
Каждый пункт основан на том, что OpenAI, Anthropic, Perplexity и Google документируют о своих краулерах и функциях ответов, или на опубликованных рекомендациях Google для Поиска. Где вендор ничего не документирует, например как Claude или Perplexity ранжируют источники, мы так и говорим, а не гадаем. Цифры о заблокированных краулерах взяты из нашего собственного исследования 1 000 самых популярных доменов.
Мы не включили приёмы, которые вендоры называют бесполезными или у которых нет задокументированного эффекта: нарезку страниц на мелкие куски, отдельные версии для AI, покупку упоминаний и ставку на llms.txt для Google, ведь Google пишет, что его Поиск этот файл не использует. Публикация llms.txt не вредит и может помочь другим инструментам; см. наше руководство по llms.txt. Ни один пункт не гарантирует цитирование. Они делают его возможным и дают ассистенту причину выбрать вашу страницу.
AISeeWhy проверяет пункты 1–4 за вас: загружает страницу как 16 AI- и поисковых краулеров рядом с настоящим браузером, применяет robots.txt к каждому краулеру, находит страницы-проверки и показывает, сколько текста приходит без JavaScript.
Исправления для этой проблемы
- Длинные абзацы: 2
- Разделы не начинаются с короткого ответа: 2 из 3
- На коммерческой странице нет понятного следующего шага
- Нет ссылок на внешние источники
Что дальше
- Тестер и проверка robots.txt для AI-краулеров
- Проверка и валидатор llms.txt
- Посмотреть пример полного отчёта
- Мониторинг AI-краулеров
- Тарифы и цены
Краулеры в этой статье
Частые вопросы
Сколько времени проходит до цитирования после того, как доступ исправлен?
OpenAI и Perplexity пишут, что изменения robots.txt доходят до их систем примерно за 24 часа. Google пишет, что изменения в настройках сниппетов могут вступать в силу от нескольких дней до месяцев, пока страницы не будут просканированы заново. Дальше цитирование зависит от того, лучший ли вы источник по вопросу, поэтому фиксированного срока нет.
Можно ли заплатить, чтобы меня цитировали в ответах ChatGPT или Perplexity?
Ни один вендор не описывает способа купить цитирование в ответе. Реклама и товарные фиды это отдельные программы со своими правилами. Органический путь описан в этом списке: пустите краулеры и опубликуйте самый ясный и оригинальный ответ.
Нужен ли llms.txt, чтобы меня цитировали?
Нет. Google пишет, что его Поиск не использует llms.txt, а OpenAI, Anthropic и Perplexity не называют его обязательным для своих краулеров. Файл необязателен и безвреден. Доступ для краулеров, текст в HTML и ясные ответы гораздо важнее.
Если заблокировать GPTBot или ClaudeBot, мой сайт перестанут цитировать?
Само по себе нет. GPTBot и ClaudeBot собирают контент для обучения моделей. Цитирование в поиске ChatGPT зависит от OAI-SearchBot, а в Claude от Claude-SearchBot и Claude-User. Держите краулеры для обучения и для поиска в разных группах robots.txt, чтобы запрет обучения не задел поисковые краулеры.
Источники
- OpenAI: обзор краулеров OpenAI
- Anthropic: сканирует ли Anthropic данные в интернете и как владельцам сайтов заблокировать краулер?
- Perplexity: краулеры Perplexity
- Google Search Central: AI-функции и ваш сайт
- Google Search Central: оптимизация сайта для генеративных AI-функций в Google Поиске
- Google Search Central: метатег robots, data-nosnippet и X-Robots-Tag
- Google Search Central: создание полезного, надёжного контента для людей
- Google Search Central: как повлиять на даты публикации
- Google Search Central: основы JavaScript SEO
- Google Search Central: структурированные данные Organization
- OpenAI: покупки с поиском ChatGPT
- OpenAI: отправка товарных фидов
- Microsoft Bing: AI Performance в Bing Webmaster Tools, публичная предварительная версия
- AISeeWhy: отчёт о доступе AI-краулеров, 2026-11