2 sayfa taramayı reddetti

Kısa yanıt

Bu sayfalar, denetim onları bir web tarayıcısı gibi çektiğinde 401, 403, 429 veya 503 döndürdü ya da zaman aşımına uğradı. Bu çoğu zaman bozuk bir sayfa değil, bir güvenlik duvarı, bot koruması veya hız sınırıdır. Arama ve yapay zekâ tarayıcılarının aynı yanıtı alıp almadığını kontrol edin.

crawl.unreachable · Öncelik: P1–P3, tarayıcı türüne göre

Ne anlama gelir

Bu sayfalar 401, 403, 429 veya 503 yanıtı verdi ya da zaman aşımına uğradı. Bir güvenlik duvarı veya hız sınırı tarayıcıları da durduruyor olabilir. Arama motoru ve yapay zekâ tarayıcılarının aynı yanıtı alıp almadığını kontrol edin.

Yapay zekâ araması için neden önemli

Denetim kısa sürede tek bir sunucudan çok sayıda sayfa çeker; bu yüzden insanlar sayfayı alsa bile bir hız sınırı 429 veya 503 döndürebilir. Aynı kural arama ve yapay zekâ tarayıcılarına da uygulanıyorsa bu sayfalar onların dizinleri için çekilmez ve yapay zekâ yanıtlarında alıntılanamaz.

401, sayfanın giriş gerektirdiği anlamına gelir; bu, hesap alanları için beklenir ama herkese açık içerik için beklenmez. Her sayfada 503 görülmesi bakım modunun açık kaldığını gösterebilir. Çözüm kimin reddedildiğine bağlı olduğu için bu sayfalar bozuk bağlantılardan ayrı tutulur.

Nasıl düzeltilir

  1. Listelenen URL'lerden birkaçını gizli bir web tarayıcısı penceresinde açın. Yükleniyorlarsa engelleme otomatik isteklere yöneliktir.
  2. Reddedilen istekleri güvenlik duvarı, CDN veya barındırma günlüklerinizde arayın. Googlebot ve Bingbot gibi doğrulanmış arama tarayıcılarına ve istediğiniz yapay zekâ arama tarayıcılarına izin verildiğinden emin olun; Cloudflare dahil birçok CDN'de doğrulanmış botlar için bir ayar vardır.
  3. Nedeni bir hız sınırıysa normal sayfa istekleri için sınırı yükseltin ya da HTML sayfalarını sınırın dışında bırakın.
  4. Sayfalar 401 döndürüyorsa herkese açık sayfalardan girişi kaldırın ya da herkese açık sayfalardan özel sayfalara bağlantı vermeyi bırakın.
  5. Sonucu doğrulamak için hesabınızdan site denetimini yeniden çalıştırın.

Çözüm nasıl doğrulanır

Değişiklikten sonra raporda "Yeniden denetle" düğmesine basın: neyin düzeltildiğini ve puanın nasıl değiştiğini listeler.

Sayfamı denetle →

Tüm bulgular ve puanın nasıl hesaplandığı