Strony, które odmówiły skanowania: 2
Te strony odpowiedziały kodem 401, 403, 429 lub 503 albo przekroczyły limit czasu, gdy audyt pobierał je jako przeglądarka. Często odpowiada za to zapora, ochrona przed botami lub limit liczby żądań, a nie uszkodzona strona. Sprawdź, czy crawlery wyszukiwarek i AI dostają tę samą odpowiedź.
Co to oznacza
Te strony odpowiedziały kodem 401, 403, 429 lub 503 albo przekroczyły limit czasu. Zapora lub limit żądań może blokować także crawlery. Sprawdź, czy crawlery wyszukiwarek i AI dostają tę samą odpowiedź.
Dlaczego to ważne dla wyszukiwarek AI
Audyt pobiera wiele stron w krótkim czasie z jednego serwera, więc limit liczby żądań może odpowiadać kodem 429 lub 503 nawet wtedy, gdy ludzie widzą stronę. Jeśli ta sama reguła dotyczy crawlerów wyszukiwarek i AI, te strony nie są pobierane do ich indeksów i nie mogą być cytowane w odpowiedziach AI.
Kod 401 oznacza, że strona wymaga logowania, co jest normalne w obszarach konta, ale nie w treściach publicznych. Kod 503 na każdej stronie może oznaczać, że tryb konserwacji pozostał włączony. Te strony są oddzielone od niedziałających linków, ponieważ poprawka zależy od tego, kto jest odrzucany.
Jak to naprawić
- Otwórz kilka wymienionych adresów URL w prywatnym oknie przeglądarki. Jeśli się wczytują, blokada dotyczy żądań automatycznych.
- Poszukaj odrzuconych żądań w logach zapory, CDN lub hostingu. Upewnij się, że zweryfikowane crawlery wyszukiwarek, takie jak Googlebot i Bingbot, oraz wybrane crawlery wyszukiwania AI mają dostęp; wiele sieci CDN, w tym Cloudflare, ma ustawienie dla zweryfikowanych botów.
- Jeśli przyczyną był limit liczby żądań, podnieś go dla zwykłych żądań stron albo wyłącz z niego strony HTML.
- Jeśli strony odpowiadają kodem 401, usuń logowanie ze stron publicznych albo przestań linkować ze stron publicznych do prywatnych.
- Uruchom ponownie audyt witryny ze swojego konta, aby potwierdzić wynik.
Jak potwierdzić poprawkę
Po zmianie kliknij „Sprawdź ponownie” w raporcie: zobaczysz, co zostało naprawione i jak zmienił się wynik.