Мій конкурент є в ChatGPT і Perplexity, а мене немає. Як з’ясувати чому?

Опубліковано

Коротка відповідь

Рухайтеся по порядку: спершу переконайтеся, що пошукові краулери асистентів можуть дістатися до ваших сторінок і прочитати їх, потім порівняйте свою сторінку з тією, яку вони цитують для конкурента. Перевірте, чи відповідає вона на запитання прямо й одразу, чи вказані ціни, функції та локації звичайним текстом, чи збігається опис з тим, як бізнес описують інші сайти, і чи підкріплюють її відгуки й добірки, які цитують асистенти. Жоден асистент не публікує свій метод ранжування, тож це діагностика методом виключення, а не формула.

Ви питаєте ChatGPT або Perplexity про найкращий варіант у своїй категорії, і там названо конкурента з посиланням, а вас не згадано взагалі. Хочеться вгадати причину. Краще виключати причини по одній: почати з бінарних, які легко довести, як-от заблокований краулер, і перейти до тих, що стосуються контенту й репутації. Найкращий доказ того, що асистент вважав корисним, — процитована сторінка конкурента.

На цій сторінці
  1. Чому ChatGPT не може знайти мій сайт?
  2. Чи є на вашому сайті сторінка, що відповідає саме на це запитання?
  3. Чи вказані ваші ціни, функції та локації звичайним текстом?
  4. Чи описують інші сайти ваш бізнес так само, як ви?
  5. Які сторонні сторінки цитують асистенти і чи є там ви?
  6. Чи свіжа ваша інформація і чи чітко вказано дату?
  7. Як порівняти свою сторінку з процитованою сторінкою конкурента і що від мене не залежить?

Чому ChatGPT не може знайти мій сайт?

Спершу перевірте доступ, бо жодна робота з контентом не допоможе, якщо краулера не пускають. Кожен асистент називає краулер, що формує його пошукові результати: OAI-SearchBot для ChatGPT, PerplexityBot для Perplexity і Claude-SearchBot для Claude. OpenAI повідомляє, що сайти, які відмовилися від OAI-SearchBot, не показуватимуться в пошукових відповідях ChatGPT, хоча ще можуть з’являтися як навігаційні посилання. Anthropic зазначає, що вимкнення Claude-SearchBot може зменшити вашу видимість у пошукових результатах для користувачів.

Таке блокування трапляється часто. У нашому дослідженні 1000 найпопулярніших доменів із 518, що віддавали robots.txt, 58 забороняли OAI-SearchBot, 67 — Claude-SearchBot і 86 — PerplexityBot. Швидкий погляд на ваш файл:

curl -s https://example.com/robots.txt | grep -i -A4 -E "user-agent: (oai-searchbot|perplexitybot|claude-searchbot|\*)"

Потім перевірте два інші бар’єри. Файрвол або CDN може відповідати краулерам кодом 403 чи сторінкою-перевіркою, тоді як браузери отримують справжню сторінку; OpenAI просить власників сайтів переконатися, що їхній хостинг чи CDN пропускає трафік з опублікованих IP-адрес searchbot, а Perplexity зазначає, що сайтам за файрволом вебзастосунків (WAF) може знадобитися явно дозволити її ботів. А текст, що з’являється лише після виконання JavaScript, може так і не дійти до краулера. Наші посібники про robots.txt для AI-краулерів, блокування файрволом і JavaScript-контент докладно описують кожне виправлення. Для Google AI Overviews і AI Mode єдина технічна вимога Google — сторінка має бути проіндексована й придатна для показу зі сніпетом.

Чи є на вашому сайті сторінка, що відповідає саме на це запитання?

Коли з доступом усе гаразд, відкрийте процитовану сторінку конкурента й подивіться, що це за сторінка. Дуже часто вона побудована навколо самого запитання: порівняння, добірка «найкращі інструменти для», сторінка цін або сторінка під один конкретний сценарій. Якщо на вашому сайті є лише головна сторінка й перелік функцій, можливо, жодна ваша сторінка взагалі не відповідає цьому запитанню.

Це важливо, бо асистенти не шукають точними словами користувача. OpenAI повідомляє, що ChatGPT зазвичай переписує запитання в один чи кілька цільових пошукових запитів, а Google — що AI Mode виконує кілька пов’язаних пошуків за підтемами. Сторінка, заголовок і перший абзац якої збігаються з одним із цих вужчих запитів, має більше шансів бути знайденою, ніж загальна сторінка, що зачіпає тему мимохідь.

Ставте відповідь на початок. У першому абзаці скажіть, для кого продукт, що він робить і скільки коштує, реченнями, які зрозумілі навіть як окрема цитата. Власні поради Google щодо AI-функцій включають те, щоб важливий контент був доступний у текстовій формі.

Чи вказані ваші ціни, функції та локації звичайним текстом?

Факти, які є лише на зображеннях, у PDF, у конфігураторі чи за кнопкою «зв’язатися з відділом продажів», важко процитувати будь-якій системі. Порівняйте, скільки конкретних фактів наводить сторінка конкурента: тарифи й ціни, країни, інтеграції, години роботи, зони доставки. Якщо в них написано «від $29 на місяць, доставка в ЄС і Велику Британію», а у вас — «гнучкі ціни», асистенту є що процитувати лише з одного боку.

OpenAI конкретно описує відповіді про товари. Компанія повідомляє, що, вибираючи товари, ChatGPT враховує структуровані метадані від власних і сторонніх постачальників, як-от ціну й опис товару, а також інший сторонній контент і ранжує продавців за такими чинниками, як наявність, ціна, якість і те, чи є вони виробником або основним продавцем. Google просить підтримувати актуальні дані в Merchant Center і профілі компанії та стежити, щоб структуровані дані збігалися з видимим текстом сторінки.

Чи описують інші сайти ваш бізнес так само, як ви?

Асистенти поєднують те, що ви кажете про себе, з тим, що про вас кажуть інші. Якщо назва, категорія та опис вашого бізнесу відрізняються на сайті, у каталогах, магазинах застосунків і соцмережах, їх важче пов’язати з однією сутністю. Використовуйте одну назву й один короткий опис усюди, де ви це контролюєте.

На головній сторінці або сторінці «Про нас» додайте структуровані дані Organization. Google визначає sameAs як URL сторінки на іншому сайті з додатковою інформацією про вашу організацію, наприклад профіль у соцмережі чи на сайті відгуків, і зазначає, що деякі властивості допомагають відрізнити вашу організацію від інших зі схожими назвами.

<script type="application/ld+json">
{
  "@context": "https://schema.org",
  "@type": "Organization",
  "name": "Example",
  "url": "https://example.com/",
  "logo": "https://example.com/logo.png",
  "description": "Online booking software for small salons.",
  "sameAs": [
    "https://www.linkedin.com/company/example",
    "https://github.com/example"
  ]
}
</script>

Які сторонні сторінки цитують асистенти і чи є там ви?

Перегляньте всі джерела, процитовані у відповідях, де з’являється конкурент. Часто більшість із них — не сайт конкурента, а сайти відгуків, добірки «найкращих», статті-порівняння й гілки форумів. Якщо вас немає в жодному з них, в асистента мало зовнішніх свідчень про вас.

Самі асистенти кажуть про це небагато. OpenAI повідомляє, що відповіді про товари можуть враховувати відгуки і що її підсумки відгуків базуються на відгуках із публічних сайтів. Perplexity каже, що шукає в авторитетних джерелах, як-от статті, сайти й журнали, і позначає деякі сайти цілком як Government, Academic або Trusted після перевірки, яка, наприклад, з’ясовує, чи виправляє сайт свої помилки і чи вказує автора кожного матеріалу. Perplexity не стверджує, що ці позначки вирішують, які джерела цитуються, і зазначає, що платежі й партнерства на них не впливають.

Практичний крок — звичайний маркетинг: просіть справжніх клієнтів залишати відгуки там, де шукають ваші покупці, додайтеся до каталогів своєї категорії й відповідайте на запитання в спільнотах, де можете справді допомогти. Платного місця в самій відповіді не пропонують: OpenAI повідомляє, що рекламодавці не можуть формувати, ранжувати чи змінювати відповіді ChatGPT.

Чи свіжа ваша інформація і чи чітко вказано дату?

OpenAI радить користувачам ChatGPT перевіряти, коли процитоване джерело опубліковано чи оновлено, тож дати важливі для людей, які читають відповідь. Якщо на вашій сторінці цін досі торішні тарифи, а на сторінці порівняння взагалі немає дати, сторінка конкурента з минулого місяця може просто здаватися надійнішою.

Google рекомендує видиму дату на сторінці та відповідні значення datePublished і dateModified у структурованих даних. Також Google називає тривожним сигналом зміну дати сторінки без суттєвих змін, щоб вона здавалася свіжою. Спершу оновіть факти, потім дату.

Як порівняти свою сторінку з процитованою сторінкою конкурента і що від мене не залежить?

Поставте те саме запитання кілька разів, занотуйте, яку сторінку конкурента цитують найчастіше, і порівняйте її зі своєю найближчою сторінкою:

Спершу закрийте найбільший розрив, а потім перевіряйте знову протягом кількох тижнів, а не наступного дня. Дещо змінити не можна. OpenAI повідомляє, що ChatGPT ранжує результати за багатьма чинниками і місце не гарантоване; Perplexity, Anthropic і Google також не публікують, як ранжують джерела. Відповіді також залежать від пам’яті, історії та місцезнаходження користувача.

AISeeWhy перевіряє першу частину за вас: завантажує вашу сторінку як 16 AI- і пошукових краулерів поруч із браузером, застосовує robots.txt для кожного краулера, розпізнає сторінки-перевірки й показує, скільки тексту надходить без JavaScript. Потім перевірка видимості в AI відстежує з часом, чи згадують вас ChatGPT, Claude, Perplexity і Gemini поруч із щонайбільше чотирма конкурентами.

Виправлення для цієї проблеми

Безкоштовні інструменти

Що далі

Краулери в цій статті

Поширені запитання

Чому ChatGPT не показує мій сайт?

Почніть із доступу: OpenAI повідомляє, що сайти, які відмовилися від OAI-SearchBot, не показуються в пошукових відповідях ChatGPT і що ваш хостинг чи CDN має пропускати опубліковані IP-адреси searchbot. Якщо з доступом усе гаразд, звичайна причина в тому, що інша сторінка відповідає на запитання прямо, з чіткішими фактами й більшою кількістю зовнішніх згадок. OpenAI зазначає, що місце не гарантоване.

Чи можна заплатити, щоб ChatGPT рекомендував мене замість конкурента?

Ні. OpenAI повідомляє, що реклама не впливає на відповіді ChatGPT, рекламодавці не можуть формувати, ранжувати чи змінювати відповіді, а реклама показується окремо й має позначку. Товари в шопінг-відповідях теж не є рекламою.

Коли ChatGPT чи Perplexity помітять виправлення?

OpenAI повідомляє, що зміни в robots.txt доходять до її пошукових систем приблизно за 24 години, Perplexity — що за час до 24 годин. Це лише відновлює доступ. Чи цитуватимуть потім вашу сторінку, залежить від того, як вона виглядає порівняно з іншими джерелами, а це не публікується, тож оцінюйте зміни контенту протягом тижнів.

Чи змусить файл llms.txt AI-асистентів рекомендувати мене?

Google повідомляє, що для появи в AI Overviews чи AI Mode не потрібні ні AI-текстові файли, ні спеціальна розмітка. OpenAI, Perplexity і Anthropic не згадують llms.txt на сторінках довідки про краулери й пошук, які ми перевірили, тож не розраховуйте на нього як на чинник ранжування.

Чи вирішує позначка Trusted у Perplexity, які сайти цитуються?

Perplexity цього не стверджує. Компанія описує позначки Government, Academic і Trusted як результат перевірки джерел для сайтів загалом, зазначає, що відсутність позначки не є негативною оцінкою і що платежі на позначки не впливають.

Джерела

Інші статті