Nie można pobrać sitemap (status 403)
Mapa witryny jest zadeklarowana lub oczekiwana, ale jej pobranie zakończyło się błędem, statusem 401, 403, 429 lub 5xx, więc crawlery mogą też nie móc jej odczytać. Audyt pobiera ją jako przeglądarka. Spraw, aby adres mapy witryny był publiczny, i wyłącz go spod wyzwań botów i limitów żądań.
Co to oznacza
Znaleziono sitemap, ale odpowiedział statusem 403 lub nie odpowiedział wcale, więc roboty też mogą nie być w stanie go użyć. Sprawdź, czy zapora sieciowa pozwala robotom go pobierać.
Dlaczego to ważne dla wyszukiwarek AI
Mapa witryny zwracająca 403 lub błąd serwera jest równie dobra jak brakująca: crawlery nie mogą się z niej dowiedzieć o nowych ani zmienionych stronach. Częstą przyczyną jest ochrona przed botami, bo żądania mapy witryny pochodzą niemal wyłącznie od crawlerów, które te reguły mają zatrzymywać.
Duże mapy witryn generowane przy każdym żądaniu mogą też przekraczać czas lub limity serwera, co objawia się statusem 5xx. Ponieważ audyt pobiera plik jako przeglądarka, błąd tutaj zwykle oznacza, że crawlery także są odrzucane.
Jak to naprawić
- Otwórz adres mapy witryny z raportu i zanotuj status. Raport AISeeWhy pokazuje dowody i gotową poprawkę do wklejenia; potem uruchom „Sprawdź ponownie”, aby potwierdzić wynik.
- W swoim CDN lub WAF wyłącz ścieżki map witryn (na przykład
/sitemap*.xml) spod wyzwań, Bot Fight Mode i limitowania żądań. - Jeśli jest za uwierzytelnianiem w konfiguracji w stylu środowiska testowego, udostępnij ją publicznie na hoście produkcyjnym.
- W przypadku błędów 5xx buforuj wygenerowaną mapę witryny lub zbuduj ją z góry jako plik statyczny, a bardzo duże podziel indeksem map witryn.
Jak potwierdzić poprawkę
Po zmianie kliknij „Sprawdź ponownie” w raporcie: zobaczysz, co zostało naprawione i jak zmienił się wynik.