Sitemap nepavyksta atsisiųsti (būsena 403)
Sitemap nurodytas ar tikėtinas, bet jo atsisiuntimas nepavyko su klaida, 401, 403, 429 ar 5xx būsena, todėl robotai taip pat gali negalėti jo perskaityti. Auditas jį atsisiunčia kaip naršyklė. Padarykite sitemap URL viešą ir išimkite jį iš robotų patikrinimų ir užklausų dažnio ribojimo.
Ką tai reiškia
Sitemap rastas, bet jis atsakė būsena 403 arba neatsakė, todėl ir robotai gali negalėti juo naudotis. Patikrinkite, ar ugniasienė leidžia robotams jį atsisiųsti.
Kodėl tai svarbu DI paieškai
Sitemap, grąžinantis 403 ar serverio klaidą, prilygsta trūkstamam: robotai negali iš jo sužinoti apie naujus ar pakeistus puslapius. Dažna priežastis yra apsauga nuo robotų, nes sitemap užklausas beveik vien siunčia robotai, kuriems sustabdyti tos taisyklės ir sukurtos.
Dideli sitemap, generuojami kiekvienai užklausai, taip pat gali viršyti laiką ar serverio ribas, o tai matoma kaip 5xx būsena. Kadangi auditas failą atsisiunčia kaip naršyklė, nesėkmė čia dažniausiai reiškia, kad atmetami ir robotai.
Kaip tai ištaisyti
- Atidarykite ataskaitoje nurodytą sitemap URL ir užsirašykite būseną. AISeeWhy ataskaitoje matysite įrodymus ir paruoštą įklijuoti pataisymą; vėliau paspauskite „Patikrinti dar kartą“, kad patvirtintumėte rezultatą.
- Savo CDN ar WAF išimkite sitemap kelius (pvz.,
/sitemap*.xml) iš patikrinimų, Bot Fight Mode ir užklausų dažnio ribojimo. - Jei jis apsaugotas autentifikacija kaip bandomojoje aplinkoje, padarykite jį viešą produkciniame serveryje.
- 5xx klaidų atveju saugokite sugeneruotą sitemap podėlyje arba iš anksto sukurkite jį kaip statinį failą, o labai didelius padalykite naudodami sitemap indeksą.
Kaip įsitikinti, kad pataisymas suveikė
Atlikę pakeitimą, ataskaitoje paspauskite „Patikrinti dar kartą“: matysite, kas ištaisyta ir kaip pasikeitė balas.