Skiftet til Cloudflare? Tjek, at AI-crawlere stadig kommer ind

Bot-beskyttelse, “Block AI bots” og WAF-regler er slået til som standard i mange Cloudflare-opsætninger. De kan afvise AI-søgecrawlere, uden at du ser nogen fejl.

Gratis · Ingen tilmelding · Svar på 30 sekunder

Hvad der blokerer dem

Bot Fight Mode, blokering af AI-bots, managed challenges og egne WAF-regler, der matcher en crawlers user agent eller dens netværk.

Hvad vi tjekker

Dine sider hentet som 16 AI- og søgecrawlere ved siden af en almindelig browser, med statuskoden og den Cloudflare-header, der viser en blokering.

Hold styr på det

Regler ændrer sig. Overvågningen tjekker dine vigtigste sider igen og sender dig en e-mail, når en crawler bliver lukket ude igen.

Få den komplette pakke

Efter et redesign · Efter skiftet til Shopify · Efter en ændring af robots.txt