Sitemap kann nicht abgerufen werden (Status 403)
Eine Sitemap ist angegeben oder wird erwartet, doch ihr Abruf schlug mit einem Fehler, 401, 403, 429 oder einem 5xx-Status fehl, sodass Crawler sie möglicherweise ebenfalls nicht lesen können. Die Prüfung ruft sie als Browser ab. Machen Sie die Sitemap-URL öffentlich und nehmen Sie sie von Bot-Challenges und Ratenbegrenzung aus.
Was es bedeutet
Eine Sitemap wurde gefunden, antwortete aber mit Status 403 oder gar nicht, sodass Crawler sie womöglich ebenfalls nicht nutzen können. Prüfen Sie, ob Ihre Firewall den Abruf durch Crawler zulässt.
Warum das für die KI-Suche wichtig ist
Eine Sitemap, die 403 oder einen Serverfehler liefert, ist so gut wie nicht vorhanden: Crawler erfahren daraus nichts über neue oder geänderte Seiten. Bot-Schutz ist eine häufige Ursache, weil Sitemap-Anfragen fast ausschließlich von Crawlern kommen, die diese Regeln stoppen sollen.
Große Sitemaps, die bei jeder Anfrage erzeugt werden, können außerdem in einen Timeout laufen oder Server-Limits erreichen, was sich als 5xx-Status zeigt. Da die Prüfung die Datei als Browser abruft, bedeutet ein Fehler hier meist, dass auch Crawler abgewiesen werden.
So beheben Sie es
- Öffnen Sie die Sitemap-URL aus dem Bericht und notieren Sie den Status. Der AISeeWhy-Bericht zeigt die Belege und einen fertigen Fix zum Einfügen; klicken Sie danach auf „Erneut prüfen“, um das Ergebnis zu bestätigen.
- Nehmen Sie Sitemap-Pfade (zum Beispiel
/sitemap*.xml) in Ihrem CDN oder Ihrer WAF von Challenges, Bot Fight Mode und Ratenbegrenzung aus. - Liegt sie bei einer Staging-artigen Einrichtung hinter einer Authentifizierung, machen Sie sie auf dem Produktions-Host öffentlich.
- Cachen Sie bei 5xx-Fehlern die erzeugte Sitemap oder bauen Sie sie vorab als statische Datei, und teilen Sie sehr große mit einem Sitemap-Index auf.
So bestätigen Sie den Fix
Klicken Sie nach der Änderung im Bericht auf „Erneut prüfen“: Er zeigt, was behoben wurde und wie sich der Score verändert hat.