Sitemap kan ikke hentes (status 403)
En sitemap er oppgitt eller forventet, men henting av den mislyktes med en feil, 401, 403, 429 eller en 5xx-status, så crawlere kan kanskje heller ikke lese den. Revisjonen henter den som en nettleser. Gjør sitemap-URL-en offentlig og unnta den fra botutfordringer og rate limits.
Hva det betyr
Det ble funnet et sitemap, men det svarte med status 403 eller svarte ikke, så søkerobotene kan kanskje heller ikke bruke det. Sjekk at brannmuren din lar robotene hente det.
Hvorfor det betyr noe for AI-søk
En sitemap som returnerer 403 eller en serverfeil er like god som manglende: crawlere kan ikke lære om nye eller endrede sider fra den. Botbeskyttelse er en vanlig årsak, fordi forespørsler om sitemap nesten utelukkende kommer fra crawlere, som reglene er laget for å stoppe.
Store sitemaps som genereres ved hver forespørsel kan også gå ut på tid eller treffe servergrenser, noe som viser seg som en 5xx-status. Fordi revisjonen henter filen som en nettleser, betyr en feil her vanligvis at crawlere også blir avvist.
Slik retter du det
- Åpne sitemap-URL-en fra rapporten og noter statusen. AISeeWhy-rapporten viser bevisene og en ferdig rettelse du kan lime inn; kjør «Sjekk på nytt» etterpå for å bekrefte resultatet.
- Unnta sitemap-stier (for eksempel
/sitemap*.xml) fra utfordringer, Bot Fight Mode og rate limiting i CDN-et eller WAF-en. - Ligger den bak autentisering i et oppsett som ligner staging, gjør du den offentlig på produksjonsverten.
- Ved 5xx-feil cacher du den genererte sitemap eller forhåndsbygger den som en statisk fil, og deler svært store opp med en sitemap-indeks.
Slik bekrefter du rettelsen
Trykk på "Sjekk på nytt" i rapporten etter endringen: den viser hva som er rettet og hvordan scoren har endret seg.