2 pages ont refusé l'exploration

Réponse courte

Ces pages ont répondu 401, 403, 429 ou 503, ou ont dépassé le délai, quand l'audit les a récupérées comme un navigateur. C'est souvent le fait d'un pare-feu, d'une protection anti-bots ou d'une limite de débit plutôt que d'une page cassée. Vérifiez si les robots de recherche et d'IA reçoivent la même réponse.

crawl.unreachable · Priorité: P1–P3, selon le type de robot

Ce que cela signifie

Ces pages ont répondu 401, 403, 429 ou 503, ou n'ont pas répondu à temps. Un pare-feu ou une limite de débit bloque peut-être aussi les robots. Vérifiez si les robots de recherche et d'IA reçoivent la même réponse.

Pourquoi c'est important pour la recherche IA

L'audit récupère beaucoup de pages en peu de temps depuis un seul serveur ; une limite de débit peut donc répondre 429 ou 503 alors que les visiteurs obtiennent la page. Si la même règle s'applique aux robots de recherche et d'IA, ces pages ne sont pas récupérées pour leurs index et ne peuvent pas être citées dans les réponses d'IA.

Un 401 signifie que la page exige une connexion, ce qui est normal pour un espace client mais pas pour un contenu public. Un 503 sur toutes les pages peut signifier que le mode maintenance est resté activé. Ces pages sont séparées des liens cassés, car la correction dépend de qui est refusé.

Comment corriger

  1. Ouvrez quelques-unes des URL listées dans une fenêtre de navigation privée. Si elles se chargent, le blocage vise les requêtes automatisées.
  2. Cherchez les requêtes refusées dans les journaux de votre pare-feu, de votre CDN ou de votre hébergeur. Assurez-vous que les robots de recherche vérifiés comme Googlebot et Bingbot, ainsi que les robots de recherche IA que vous souhaitez, sont autorisés ; beaucoup de CDN, dont Cloudflare, proposent un réglage pour les bots vérifiés.
  3. Si une limite de débit en est la cause, relevez-la pour les requêtes de pages ordinaires ou excluez-en les pages HTML.
  4. Si des pages répondent 401, retirez la connexion des pages publiques, ou cessez de faire des liens vers des pages privées depuis des pages publiques.
  5. Relancez l'audit du site depuis votre compte pour confirmer le résultat.

Comment confirmer le correctif

Après la modification, cliquez sur « Revérifier » dans le rapport : il indique ce qui a été corrigé et comment le score a évolué.

Vérifier ma page →

Tous les constats et le fonctionnement du score