Мой конкурент есть в ChatGPT и Perplexity, а меня нет. Как выяснить почему?

Опубликовано

Короткий ответ

Идите по порядку: сначала убедитесь, что поисковые краулеры ассистентов могут добраться до ваших страниц и прочитать их, затем сравните свою страницу со страницей конкурента, которую они цитируют. Проверьте, отвечает ли эта страница на вопрос прямо и в самом начале, указаны ли цены, функции и адреса простым текстом, совпадает ли описание с тем, как бизнес описывают другие сайты, и подкреплена ли она отзывами и подборками, которые цитируют ассистенты. Ни один ассистент не публикует свой метод ранжирования, поэтому это диагностика методом исключения, а не формула.

Вы спрашиваете ChatGPT или Perplexity о лучшем варианте в своей категории, и в ответе со ссылкой назван конкурент, а вас нет вовсе. Хочется угадать причину. Лучше исключать причины по одной, начиная с тех, что бинарны и легко доказуемы, например заблокированного краулера, и переходя к тем, что касаются контента и репутации. По пути процитированная страница конкурента — лучшее свидетельство того, что ассистент счёл полезным.

На этой странице
  1. Почему ChatGPT не находит мой сайт?
  2. Есть ли на вашем сайте страница, которая отвечает именно на этот вопрос?
  3. Указаны ли ваши цены, функции и адреса простым текстом?
  4. Описывают ли другие сайты ваш бизнес так же, как вы?
  5. Какие сторонние страницы цитируют ассистенты и есть ли на них вы?
  6. Актуальна ли ваша информация и видна ли дата?
  7. Как сравнить мою страницу с процитированной страницей конкурента и что от меня не зависит?

Почему ChatGPT не находит мой сайт?

Сначала проверьте доступ: никакая работа над контентом не поможет, если краулера разворачивают на входе. Каждый ассистент называет краулер, который формирует его поисковые результаты: OAI-SearchBot для ChatGPT, PerplexityBot для Perplexity и Claude-SearchBot для Claude. OpenAI сообщает, что сайты, запретившие OAI-SearchBot, не будут показываться в поисковых ответах ChatGPT, хотя могут появляться в навигационных ссылках. Anthropic сообщает, что отключение Claude-SearchBot может снизить вашу видимость в результатах поиска для пользователей.

Такая блокировка встречается часто. В нашем исследовании 1000 самых популярных доменов из 518, отдававших robots.txt, 58 запрещали OAI-SearchBot, 67 — Claude-SearchBot и 86 — PerplexityBot. Быстрый взгляд на ваш собственный файл:

curl -s https://example.com/robots.txt | grep -i -A4 -E "user-agent: (oai-searchbot|perplexitybot|claude-searchbot|\*)"

Затем проверьте два других барьера. Файрвол или CDN может отвечать краулерам кодом 403 или страницей-проверкой, пока браузеры получают настоящую страницу; OpenAI просит владельцев сайтов убедиться, что хостинг или CDN пропускает трафик с опубликованных IP-адресов её поискового бота, а Perplexity отмечает, что сайтам за файрволом веб-приложений может понадобиться явно разрешить её ботов. А текст, который появляется только после выполнения JavaScript, может вообще не дойти до краулера. Наши руководства о robots.txt для AI-краулеров, блокировках файрволом и контенте на JavaScript подробно разбирают каждое исправление. Для Google AI Overviews и AI Mode единственное техническое требование Google — страница проиндексирована и может показываться со сниппетом.

Есть ли на вашем сайте страница, которая отвечает именно на этот вопрос?

Когда с доступом всё в порядке, откройте процитированную страницу конкурента и посмотрите, что это за страница. Очень часто она построена вокруг самого вопроса: сравнение, подборка «лучшие сервисы для», страница с ценами или страница для одного конкретного сценария. Если на вашем сайте есть только главная и список функций, может не оказаться ни одной вашей страницы, которая вообще соответствует вопросу.

Это важно, потому что ассистенты ищут не словами пользователя. OpenAI сообщает, что ChatGPT обычно переписывает вопрос в один или несколько целевых поисковых запросов, а Google — что AI Mode выполняет несколько связанных поисков по подтемам. Страница, у которой заголовок и первый абзац совпадают с одним из таких узких запросов, имеет больше шансов быть найденной, чем общая страница, которая затрагивает тему мимоходом.

Ставьте ответ в начало. В первом абзаце укажите, для кого продукт, что он делает и сколько стоит, предложениями, которые понятны и в отрыве от контекста. Собственные советы Google для AI-функций включают требование, чтобы важный контент был доступен в текстовом виде.

Указаны ли ваши цены, функции и адреса простым текстом?

Факты, которые есть только на картинках, в PDF, в конфигураторе или за кнопкой «связаться с отделом продаж», любой системе процитировать трудно. Сравните, сколько конкретных фактов приводит страница конкурента: тарифы и цены, поддерживаемые страны, интеграции, часы работы, зоны доставки. Если у них написано «от $29 в месяц, доставка в ЕС и Великобританию», а у вас «гибкие цены», процитировать ассистенту есть что только с одной стороны.

OpenAI конкретна в том, что касается ответов о товарах. Она сообщает, что при выборе товаров ChatGPT учитывает структурированные метаданные от собственных и сторонних поставщиков, например цену и описание товара, а также другой сторонний контент, и что продавцов он ранжирует по таким факторам, как наличие, цена, качество и то, являются ли они производителем или основным продавцом. Google просит поддерживать актуальность данных в Merchant Center и профиле компании и следить, чтобы структурированные данные совпадали с видимым текстом страницы.

Описывают ли другие сайты ваш бизнес так же, как вы?

Ассистенты сочетают то, что вы говорите о себе, с тем, что говорят о вас другие. Если название, категория и описание бизнеса различаются на вашем сайте, в каталогах, магазинах приложений и соцсетях, связать их с одной сущностью труднее. Используйте одно название и одно короткое описание везде, где вы это контролируете.

На главной странице или странице «О компании» добавьте структурированные данные Organization. Google определяет sameAs как URL страницы на другом сайте с дополнительной информацией о вашей организации, например профиля в соцсети или на сайте отзывов, и сообщает, что некоторые свойства помогают отличить вашу организацию от других с похожими названиями.

<script type="application/ld+json">
{
  "@context": "https://schema.org",
  "@type": "Organization",
  "name": "Example",
  "url": "https://example.com/",
  "logo": "https://example.com/logo.png",
  "description": "Online booking software for small salons.",
  "sameAs": [
    "https://www.linkedin.com/company/example",
    "https://github.com/example"
  ]
}
</script>

Какие сторонние страницы цитируют ассистенты и есть ли на них вы?

Посмотрите на все источники, процитированные в ответах, где появляется конкурент. Часто большинство из них — не сайт конкурента, а сайты отзывов, подборки «лучших», статьи-сравнения и ветки форумов. Если вас нет ни в одном из них, у ассистента мало внешних свидетельств о вас.

Сами ассистенты говорят об этом немного. OpenAI сообщает, что ответы о товарах могут учитывать отзывы и что её сводки отзывов основаны на отзывах с публичных сайтов. Perplexity сообщает, что ищет в авторитетных источниках, таких как статьи, сайты и журналы, и помечает некоторые сайты целиком как Government, Academic или Trusted после проверки, в которой спрашивается, например, исправляет ли сайт свои ошибки и указывает ли автора каждого материала. Perplexity не говорит, что эти метки определяют, какие источники цитируются, и сообщает, что платежи и партнёрства на них не влияют.

Практический шаг — обычный маркетинг: просите настоящих клиентов оставлять отзывы там, где смотрят ваши покупатели, попадайте в каталоги своей категории и отвечайте на вопросы в сообществах, где действительно можете помочь. Платного места в самом ответе не бывает: OpenAI сообщает, что рекламодатели не могут формировать, ранжировать или менять ответы ChatGPT.

Актуальна ли ваша информация и видна ли дата?

OpenAI советует пользователям ChatGPT проверять, когда процитированный источник был опубликован или обновлён, так что даты важны для тех, кто читает ответ. Если на вашей странице с ценами всё ещё прошлогодние тарифы или на странице сравнения нет даты вовсе, страница конкурента прошлого месяца может просто выглядеть надёжнее.

Google рекомендует видимую дату на странице и совпадающие значения datePublished и dateModified в структурированных данных. Также Google называет тревожным признаком смену даты страницы ради видимости свежести без существенных изменений. Сначала обновите факты, потом дату.

Как сравнить мою страницу с процитированной страницей конкурента и что от меня не зависит?

Задайте один и тот же вопрос несколько раз, отметьте, какая страница конкурента цитируется чаще всего, и положите её рядом со своей ближайшей страницей:

Сначала устраните самый большой разрыв, затем перепроверяйте в течение нескольких недель, а не на следующий день. Некоторые вещи изменить нельзя. OpenAI сообщает, что ChatGPT ранжирует результаты по множеству факторов и место не гарантируется; Perplexity, Anthropic и Google тоже не публикуют, как ранжируют источники. Кроме того, ответы зависят от памяти, истории и местоположения пользователя.

Первую часть AISeeWhy проверяет за вас: загружает вашу страницу как 16 AI- и поисковых краулеров рядом с браузером, применяет robots.txt для каждого краулера, распознаёт страницы-проверки и показывает, сколько текста доходит без JavaScript. А функция «Видимость в ИИ» затем отслеживает во времени, упоминают ли вас ChatGPT, Claude, Perplexity и Gemini рядом с четырьмя конкурентами максимум.

Исправления для этой проблемы

Бесплатные инструменты

Что дальше

Краулеры в этой статье

Частые вопросы

Почему ChatGPT не показывает мой сайт?

Начните с доступа: OpenAI сообщает, что сайты, запретившие OAI-SearchBot, не показываются в поисковых ответах ChatGPT и что ваш хостинг или CDN должен пропускать опубликованные IP-адреса её поискового бота. Если с доступом всё хорошо, обычная причина в том, что другая страница отвечает на вопрос прямее, с более ясными фактами и большим числом внешних упоминаний. OpenAI сообщает, что место в ответе не гарантируется.

Можно ли заплатить, чтобы ChatGPT рекомендовал меня вместо конкурента?

Нет. OpenAI сообщает, что реклама не влияет на ответы ChatGPT, что рекламодатели не могут формировать, ранжировать или менять ответы и что реклама показывается отдельно и с пометкой. Товарные результаты в ответах о покупках тоже не являются рекламой.

Через сколько после исправления ChatGPT или Perplexity это заметят?

OpenAI сообщает, что изменения robots.txt доходят до её поисковых систем примерно за 24 часа, Perplexity — что за срок до 24 часов. Это лишь восстанавливает доступ. Будет ли страница затем процитирована, зависит от сравнения с другими источниками, которое не раскрывается, поэтому оценивайте изменения контента на горизонте недель.

Заставит ли файл llms.txt AI-ассистентов рекомендовать меня?

Google сообщает, что для появления в AI Overviews или AI Mode не нужны AI-текстовые файлы или специальная разметка. OpenAI, Perplexity и Anthropic не упоминают llms.txt на проверенных нами страницах справки о краулерах и поиске, так что не рассчитывайте на него как на фактор ранжирования.

Решает ли метка Trusted в Perplexity, какие сайты цитируются?

Perplexity этого не утверждает. Она описывает метки Government, Academic и Trusted как результат проверки сайтов целиком, сообщает, что отсутствие метки не является негативной оценкой, и что платежи на метки не влияют.

Источники

Другие статьи