Сторінка забороняє пошуковим системам її індексувати

Коротка відповідь

Сторінка просить пошукові системи не індексувати її: noindex або none стоїть у метатегу robots, googlebot чи bingbot або в HTTP-заголовку X-Robots-Tag. Знахідка показує, де саме. Google і Bing тоді не показують сторінку в результатах. Приберіть правило, якщо сторінку мають знаходити.

seo.noindex · Пріоритет: P1

Що це означає

Правило noindex (meta) виключає сторінку з Google і Bing, а отже, і з відповідей AI, побудованих на їхньому індексі. Приберіть його, якщо сторінку мають знаходити.

Чому це важливо для ШІ-пошуку

Google і Bing виконують правило noindex під час наступного сканування сторінки, і вона зникає з їхніх результатів. Відповіді ШІ та функції ШІ-пошуку, побудовані на цих пошукових індексах, тоді теж не знаходять сторінку.

Noindex доречний для таких сторінок, як кроки оформлення замовлення, результати внутрішнього пошуку чи сторінки подяки. Проблема виникає, коли він залишився з тестового сайту, задається загальним параметром «не індексувати сайт» або надсилається як заголовок правилом сервера чи CDN, якого ніхто не бачить у HTML.

Як виправити

  1. Перевірте джерело у знахідці: метатег у HTML чи заголовок X-Robots-Tag.
  2. Для метатегу приберіть із нього noindex і none або видаліть тег. У WordPress перевірте, що в Settings → Reading вимкнено «Discourage search engines from indexing this site», а також перевірте SEO-налаштування самої сторінки. У Shopify перевірте код теми й застосунки, що додають метатег robots.
  3. Для заголовка знайдіть, де його задано, наприклад Nginx add_header, Apache Header set, файл _headers, Cloudflare Transform Rule чи проміжне ПЗ фреймворку, і приберіть його для цієї сторінки.
  4. Не блокуйте сторінку в robots.txt одночасно з цим: краулерам потрібно завантажити сторінку, щоб побачити, що noindex прибрано.
  5. Запустіть «Перевірити ще раз» у звіті сторінки, щоб підтвердити результат.

Приклад

# nginx: send noindex only where it belongs, not site-wide
location /search/ {
    add_header X-Robots-Tag "noindex";
}

Як перевірити виправлення

Після зміни натисніть «Перевірити ще раз» у звіті: він покаже, що виправлено і як змінилася оцінка.

Перевірити мою сторінку →

Пов'язані посібники

Усі знахідки і як рахується оцінка