Zu Cloudflare umgezogen? Prüfen Sie, ob KI-Crawler noch hineinkommen
Bot-Schutz, „KI-Bots blockieren“ und WAF-Regeln sind in vielen Cloudflare-Setups standardmäßig aktiv. Sie können KI-Such-Crawler abweisen, ohne dass auf Ihrer Seite ein Fehler erscheint.
Kostenlos · Ohne Anmeldung · Ergebnis in 30 Sekunden
Was sie blockiert
Bot Fight Mode, das Blockieren von KI-Bots, Managed Challenges und eigene WAF-Regeln, die auf den User-Agent oder das Netzwerk eines Crawlers zutreffen.
Was wir prüfen
Ihre Seiten, abgerufen als 16 KI- und Such-Crawler neben einem normalen Browser, mit Statuscode und dem Cloudflare-Header, der eine Blockierung anzeigt.
Dauerhaft im Blick
Regeln ändern sich. Das Monitoring prüft Ihre wichtigsten Seiten erneut und schreibt Ihnen eine E-Mail, wenn ein Crawler wieder ausgesperrt wird.
Nach einem Relaunch · Nach dem Umzug zu Shopify · Nach einer Änderung an robots.txt