2 səhifə gəzintini rədd etdi
Audit bu səhifələri brauzer kimi yüklədikdə onlar 401, 403, 429 və ya 503 ilə cavab verdi, yaxud vaxtı bitdi. Bu, çox vaxt sınıq səhifə deyil, firewall, bot qoruması və ya rate limit-dir. Axtarış və AI botlarının eyni cavabı alıb-almadığını yoxlayın.
Nə deməkdir
Bu səhifələr 401, 403, 429 və ya 503 ilə cavab verdi və ya vaxt aşımına düşdü. Firewall və ya sorğu limiti botları da dayandıra bilər; axtarış və AI botlarının eyni cavabı alıb-almadığını yoxlayın.
AI axtarışı üçün niyə vacibdir
Audit bir serverdən qısa müddətdə çoxlu səhifə yükləyir, buna görə insanlar səhifəni alsa belə, rate limit 429 və ya 503 ilə cavab verə bilər. Eyni qayda axtarış və AI botlarına da tətbiq olunursa, bu səhifələr onların indeksləri üçün yüklənmir və AI cavablarında onlardan sitat gətirilə bilməz.
401 səhifənin giriş tələb etdiyini bildirir; bu, hesab bölmələri üçün gözləniləndir, lakin ictimai məzmun üçün yox. Hər səhifədə 503 texniki xidmət rejiminin açıq qaldığını bildirə bilər. Bu səhifələr sınıq keçidlərdən ayrı saxlanılır, çünki düzəliş kimin rədd edildiyindən asılıdır.
Necə düzəltmək olar
- Sadalanan URL-lərdən bir neçəsini məxfi brauzer pəncərəsində açın. Yüklənirlərsə, bloklama avtomatlaşdırılmış sorğulara yönəlib.
- Rədd edilmiş sorğuları firewall, CDN və ya hostinq loglarında axtarın. Googlebot və Bingbot kimi təsdiqlənmiş axtarış botlarına və istədiyiniz AI axtarış botlarına icazə verildiyinə əmin olun; Cloudflare də daxil olmaqla bir çox CDN-in təsdiqlənmiş botlar üçün ayarı var.
- Səbəb rate limit-dirsə, adi səhifə sorğuları üçün limiti artırın və ya HTML səhifələri ondan çıxarın.
- Səhifələr 401 ilə cavab verirsə, ictimai səhifələrdən girişi götürün və ya ictimai səhifələrdən şəxsi səhifələrə keçid verməyi dayandırın.
- Nəticəni təsdiqləmək üçün hesabınızdan sayt auditini yenidən işə salın.
Düzəlişi necə təsdiqləmək olar
Dəyişiklikdən sonra hesabatda “Yenidən yoxla” düyməsini basın: o, nəyin düzəldildiyini və balın necə dəyişdiyini göstərir.