صفحه شروع قابل خزیدن نبود (403)
ممیزی سایت نتوانست شروع شود: صفحه شروع با 200 پاسخ نداد، یا درخواست ناموفق بود، مثلاً با تمام شدن زمان، خطای DNS یا اتصال، یا ریدایرکتهای بیش از حد. ریدایرکتها دنبال میشوند، پس فقط پاسخ نهایی حساب میشود. بدون صفحه شروع لینکی برای دنبال کردن نیست و هیچ چیز دیگری بررسی نشد.
یعنی چه
صفحه شروع با یک صفحه HTML سالم پاسخ نداد، پس هیچ لینکی دنبال نشد. URL را بررسی کنید و مطمئن شوید سایت در دسترس است.
چرا برای جستجوی هوش مصنوعی مهم است
ممیزی، مانند یک مرورگر، لینکهای داخلی را از صفحه شروع به بیرون دنبال میکند، پس لازم است آن صفحه بارگذاری شود. شکست معمولاً یعنی URL اشتباه است، سایت از دسترس خارج است، یا فایروال، محافظت در برابر ربات یا محدودیت نرخ به سرور ممیزی با مسدودسازی یا چالش پاسخ داده است.
اگر فایروالی ممیزی را مسدود کند، ممکن است خزندههای جستجو و هوش مصنوعی را هم که از نشانیهای دیتاسنتر میآیند مسدود کند. وضعیت در یافته را با آنچه در مرورگر میبینید مقایسه کنید و درخواست را در لاگهای فایروال خود پیدا کنید.
چطور آن را اصلاح کنید
- URL شروع را در یک پنجره خصوصی مرورگر باز کنید و بررسی کنید که بدون ورود به حساب بارگذاری شود.
- از نشانیای استفاده کنید که سایت واقعاً با آن ارائه میشود، با
https://و میزبان درست. - اگر وضعیت 403، 429 یا 503 است، درخواست مسدودشده را در لاگهای فایروال، CDN یا محافظت ربات هاست پیدا کنید و اجازه دهید، یا سطح چالش را برای درخواستهای معمولی صفحه پایین بیاورید.
- اگر زمان درخواست تمام شد، بار سرور و سرعت پاسخ صفحه از بیرون شبکه خود را بررسی کنید.
- ممیزی سایت را دوباره از حساب خود اجرا کنید تا نتیجه را تأیید کنید.
چطور از رفع مشکل مطمئن شویم
پس از اعمال تغییر، در گزارش «بررسی دوباره» را بزنید: فهرست میکند چه چیزی رفع شده و امتیاز چطور تغییر کرده است.