A sitemap nem tölthető le (állapot: 403)
Egy oldaltérkép meg van adva vagy várható, de a lekérése hibával, 401-gyel, 403-mal, 429-cel vagy 5xx státusszal meghiúsult, így a crawlerek sem biztos, hogy el tudják olvasni. Az audit böngészőként tölti le. Tegye nyilvánossá az oldaltérkép URL-jét, és vegye ki a botkihívások és sebességkorlátok alól.
Mit jelent
Találtunk egy sitemapet, de 403 állapottal válaszolt, vagy egyáltalán nem válaszolt, így a keresőrobotok sem biztos, hogy használni tudják. Ellenőrizd, hogy a tűzfalad engedi-e a robotoknak a letöltését.
Miért fontos az AI-keresésben
A 403-at vagy szerverhibát adó oldaltérkép annyi, mint a hiányzó: a crawlerek nem értesülhetnek belőle az új vagy módosult oldalakról. Gyakori ok a botvédelem, mert az oldaltérkép-kérések szinte kizárólag crawlerektől jönnek, amelyeket ezek a szabályok megállítani hivatottak.
A kérésenként előállított nagy oldaltérképek időtúllépésbe is futhatnak vagy szerverkorlátba ütközhetnek, ami 5xx státuszként jelentkezik. Mivel az audit böngészőként tölti le a fájlt, az itteni hiba általában azt jelenti, hogy a crawlereket is elutasítják.
Hogyan javítható
- Nyissa meg a jelentésben szereplő oldaltérkép URL-t, és jegyezze fel a státuszt. Az AISeeWhy jelentése megmutatja a bizonyítékot és egy beilleszthető javítást; utána az „Újraellenőrzés” gombbal ellenőrizze az eredményt.
- A CDN-ben vagy a WAF-ban vegye ki az oldaltérkép-útvonalakat (például
/sitemap*.xml) a kihívások, a Bot Fight Mode és a sebességkorlátozás alól. - Ha hitelesítés mögött van egy tesztkörnyezet-szerű beállításban, tegye nyilvánossá az éles hoszton.
- 5xx hibáknál gyorsítótárazza az előállított oldaltérképet, vagy építse elő statikus fájlként, és a nagyon nagyokat ossza fel oldaltérkép-indexszel.
Hogyan győződhet meg a javításról
A módosítás után kattintson a jelentésben az „Újraellenőrzés” gombra: látni fogja, mi javult, és hogyan változott a pontszám.