صفحات رفضت الزحف: 2

إجابة موجزة

ردّت هذه الصفحات بـ 401 أو 403 أو 429 أو 503، أو انتهت مهلتها، حين جلبها التدقيق كما يفعل المتصفح. وكثيرًا ما يكون السبب جدار حماية أو حماية من الروبوتات أو حدًّا لمعدل الطلبات، لا صفحة معطّلة. تحقق هل تتلقى زواحف البحث والذكاء الاصطناعي الرد نفسه.

crawl.unreachable · الأولوية: P1–P3، بحسب نوع الزاحف

ماذا يعني

ردّت هذه الصفحات بـ 401 أو 403 أو 429 أو 503، أو انتهت مهلتها. قد يكون جدار حماية أو حدّ للطلبات يوقف الزواحف أيضًا. تحقّق مما إذا كانت زواحف البحث وزواحف الذكاء الاصطناعي تتلقى الرد نفسه.

لماذا يهم ذلك في البحث بالذكاء الاصطناعي

يجلب التدقيق صفحات كثيرة في وقت قصير من خادم واحد، لذا قد يرد حد معدل الطلبات بـ 429 أو 503 حتى لو كان الناس يحصلون على الصفحة. وإذا طُبّقت القاعدة نفسها على زواحف البحث والذكاء الاصطناعي، فلن تُجلب هذه الصفحات لفهارسها ولن يمكن الاقتباس منها في إجابات الذكاء الاصطناعي.

يعني الرد 401 أن الصفحة تتطلب تسجيل الدخول، وهذا متوقع في مناطق الحساب لا في المحتوى العام. وقد يعني الرد 503 في كل صفحة أن وضع الصيانة بقي مفعّلًا. وتُعرض هذه الصفحات منفصلة عن الروابط المعطّلة لأن الإصلاح يتوقف على من يُرفض.

كيف تصلحه

  1. افتح بعض العناوين المذكورة في نافذة متصفح خاصة. فإن حُمّلت، فالحجب موجّه إلى الطلبات الآلية.
  2. ابحث عن الطلبات المرفوضة في سجلات جدار الحماية أو CDN أو الاستضافة. وتأكد من السماح لزواحف البحث الموثّقة مثل Googlebot وBingbot، ولزواحف البحث بالذكاء الاصطناعي التي تريدها؛ فكثير من شبكات CDN، ومنها Cloudflare، فيها إعداد للروبوتات الموثّقة.
  3. إذا كان السبب حد معدل الطلبات، فارفع الحد لطلبات الصفحات العادية أو استثنِ صفحات HTML منه.
  4. إذا كانت الصفحات ترد بـ 401، فأزل تسجيل الدخول من الصفحات العامة، أو توقف عن الربط بالصفحات الخاصة من الصفحات العامة.
  5. شغّل تدقيق الموقع مجددًا من حسابك للتأكد من النتيجة.

كيف تتأكد من الإصلاح

بعد التغيير، اضغط «افحص مجددًا» في التقرير: سيعرض ما تم إصلاحه وكيف تغيّرت الدرجة.

افحص صفحتي ←

كل الملاحظات وكيف تُحسب الدرجة