2 ta sahifa skanerlashni rad etdi

Qisqa javob

Audit bu sahifalarni brauzer sifatida yuklaganda ular 401, 403, 429 yoki 503 bilan javob berdi yoki vaqt tugadi. Bu koʻpincha buzilgan sahifa emas, balki firewall, bot himoyasi yoki soʻrovlar limiti. Qidiruv va AI kraulerlari ham xuddi shunday javob olayotganini tekshiring.

crawl.unreachable · Ustuvorlik: P1–P3, krauler turiga qarab

Bu nimani anglatadi

Bu sahifalar 401, 403, 429 yoki 503 bilan javob berdi yoki vaqt tugadi. Firewall yoki soʻrovlar limiti kraulerlarni ham toʻxtatayotgan boʻlishi mumkin; qidiruv va AI kraulerlari ham xuddi shu javobni olayotganini tekshiring.

Bu AI qidiruvi uchun nega muhim

Audit qisqa vaqt ichida bitta serverdan koʻp sahifalarni yuklaydi, shuning uchun odamlar sahifani olsa ham, soʻrovlar limiti 429 yoki 503 bilan javob berishi mumkin. Agar xuddi shu qoida qidiruv va AI kraulerlariga ham taalluqli boʻlsa, bu sahifalar ularning indekslari uchun yuklanmaydi va AI javoblarida ulardan iqtibos keltirib boʻlmaydi.

401 sahifa login talab qilishini bildiradi, bu hisob boʻlimlari uchun kutilgan holat, lekin ommaviy kontent uchun emas. Har bir sahifadagi 503 texnik xizmat rejimi yoqilgan holda qolib ketganini bildirishi mumkin. Bu sahifalar buzilgan havolalardan alohida saqlanadi, chunki tuzatish kim rad etilayotganiga bogʻliq.

Qanday tuzatish kerak

  1. Sanab oʻtilgan URLʼlardan bir nechtasini brauzerning maxfiy oynasida oching. Agar ular yuklansa, bloklash avtomatlashtirilgan soʻrovlarga qaratilgan.
  2. Rad etilgan soʻrovlarni firewall, CDN yoki hosting loglaringizdan qidiring. Googlebot va Bingbot kabi tasdiqlangan qidiruv kraulerlariga va siz istagan AI qidiruv kraulerlariga ruxsat berilganiga ishonch hosil qiling; koʻp CDNʼlarda, jumladan Cloudflareʼda tasdiqlangan botlar uchun sozlama bor.
  3. Agar bunga soʻrovlar limiti sabab boʻlgan boʻlsa, oddiy sahifa soʻrovlari uchun limitni oshiring yoki HTML sahifalarni undan chiqarib tashlang.
  4. Agar sahifalar 401 bilan javob bersa, ommaviy sahifalardan loginni olib tashlang yoki ommaviy sahifalardan yopiq sahifalarga havola berishni toʻxtating.
  5. Natijani tasdiqlash uchun hisobingizdan sayt auditini qayta ishga tushiring.

Tuzatishni qanday tasdiqlash mumkin

Oʻzgarishdan keyin hisobotda “Qayta tekshirish” tugmasini bosing: u nima tuzatilgani va ball qanday oʻzgarganini koʻrsatadi.

Sahifamni tekshirish →

Barcha topilmalar va ball qanday hisoblanishi