Tekshiruvimiz bloklandi, natija noaniq
Hatto auditning oddiy brauzer soʻrovi ham bloklash statusi, xato yoki challenge sahifasi bilan rad etildi, shuning uchun kraulerlar kirishini baholab boʻlmaydi. Bu kraulerlar bloklangan degani emas. Auditni qisqa vaqtga allowlistʼga qoʻshing yoki uni boshqa tarmoqdan ishga tushiring, soʻng kraulerlar natijalarini qayta solishtiring.
Bu nimani anglatadi
Hatto serverimizdan yuborilgan brauzer soʻrovi ham 403 statusi yoki challenge sahifasini oldi, shuning uchun botlar kirishini bu yerdan baholab boʻlmaydi. Auditni boshqa tarmoqdan ishga tushiring yoki auditni vaqtincha allowlistʼga qoʻshing.
Bu AI qidiruvi uchun nega muhim
AISeeWhyʼdagi har bir kirish xulosasi kraulerning javobini oʻsha serverdan yuborilgan brauzer soʻrovi bilan solishtiradi. Brauzer soʻrovining oʻzi bloklansa, solishtirish uchun asos qolmaydi, shuning uchun audit haqiqiy boʻlmasligi mumkin boʻlgan krauler bloklarini koʻrsatish oʻrniga shu yerda toʻxtaydi.
Odatiy sabab — bulut va data-markaz IP diapazonlaridan keladigan barcha trafikka challenge beradigan bot himoyasi yoki Cloudflareʼning Under Attack rejimi kabi butun saytga taalluqli rejim. Xuddi shu qoida data-markazlardan yuklaydigan haqiqiy AI kraulerlariga ham taʼsir qilishi mumkin, shuning uchun u ularga qanday munosabatda boʻlishini tekshirib koʻrish kerak.
Qanday tuzatish kerak
- Topilma dalillaridagi statusni va aniqlangan WAFʼni oʻqing.
- Cloudflareʼda bloklangan soʻrovni Security → Events boʻlimida toping va qaysi qoida ishga tushganini koʻring: Under Attack rejimi, JavaScript challenge, mamlakat yoki ASN boʻyicha bloklash yoki rate limit.
- Har bir tashrifchiga challenge beradigan qoidani vaqtincha yumshating yoki auditni bir lahzaga allowlistʼga qoʻshing, soʻng “Qayta tekshirish” tugmasini bosing. Brauzer soʻrovi oddiy Chrome user agentidan foydalanadi, shuning uchun faqat user agent boʻyicha istisno yordam bermaydi.
- Brauzer soʻrovi oʻtganda kraulerlar qatorlarini koʻrib chiqing: endi ular har bir kraulerga ruxsat bor-yoʻqligini koʻrsatadi.
Tuzatishni qanday tasdiqlash mumkin
Oʻzgarishdan keyin hisobotda “Qayta tekshirish” tugmasini bosing: u nima tuzatilgani va ball qanday oʻzgarganini koʻrsatadi.