تعذّر جلب sitemap (الحالة 403)
خريطة الموقع معلنة أو متوقعة، لكن جلبها فشل بخطأ أو بالحالة 401 أو 403 أو 429 أو 5xx، فقد لا تستطيع الزواحف قراءتها أيضًا. يجلبها التدقيق كمتصفح. اجعل عنوان خريطة الموقع عامًا واستثنِه من تحديات الروبوتات وتحديد المعدل.
ماذا يعني
تم العثور على sitemap لكنه ردّ بالحالة 403 أو لم يردّ، لذلك قد لا تتمكن برامج الزحف من استخدامه أيضًا. تأكد من أن جدار الحماية يسمح لبرامج الزحف بجلبه.
لماذا يهم ذلك في البحث بالذكاء الاصطناعي
خريطة الموقع التي تعيد 403 أو خطأ في الخادم كأنها مفقودة: لا تستطيع الزواحف أن تعرف منها بالصفحات الجديدة أو المتغيرة. وحماية الروبوتات سبب شائع، لأن طلبات خريطة الموقع تأتي كلها تقريبًا من الزواحف، وهي ما صُمّمت هذه القواعد لإيقافه.
وقد تنتهي مهلة خرائط الموقع الكبيرة المولَّدة عند كل طلب أو تتجاوز حدود الخادم، فتظهر بالحالة 5xx. وبما أن التدقيق يجلب الملف كمتصفح، فالفشل هنا يعني عادةً أن الزواحف تُرفض أيضًا.
كيف تصلحه
- افتح عنوان خريطة الموقع من التقرير ودوّن الحالة. يعرض تقرير AISeeWhy الأدلة وإصلاحًا جاهزًا للصق؛ ثم شغّل «افحص مجددًا» للتأكد من النتيجة.
- في الـ CDN أو WAF استثنِ مسارات خرائط الموقع (مثل
/sitemap*.xml) من التحديات وBot Fight Mode وتحديد المعدل. - إن كانت خلف مصادقة في إعداد شبيه بالاختبار، فاجعلها عامة على المضيف الفعلي.
- عند أخطاء 5xx، خزّن خريطة الموقع المولَّدة مؤقتًا أو ابنِها مسبقًا كملف ثابت، وقسّم الكبيرة جدًا بفهرس خرائط موقع.
كيف تتأكد من الإصلاح
بعد التغيير، اضغط «افحص مجددًا» في التقرير: سيعرض ما تم إصلاحه وكيف تغيّرت الدرجة.