Flyttat till Cloudflare? Kontrollera att AI-crawlers fortfarande kommer in
Botskydd, ”Block AI bots” och WAF-regler är påslagna som standard i många Cloudflare-konfigurationer. De kan stänga ute AI-sökcrawlers utan något fel på din sida.
Gratis · Ingen registrering · Svar på 30 sekunder
Vad som blockerar dem
Bot Fight Mode, blockering av AI-botar, hanterade utmaningar och egna WAF-regler som matchar en crawlers user agent eller dess nätverk.
Vad vi kontrollerar
Dina sidor hämtade som 16 AI- och sökcrawlers bredvid en vanlig webbläsare, med statuskoden och den Cloudflare-header som visar en blockering.
Håll koll på det
Regler ändras. Bevakningen kontrollerar dina viktigaste sidor igen och mejlar dig när en crawler stängs ute igen.
Efter en omdesign · Efter flytt till Shopify · Efter en ändring i robots.txt