Passato a Cloudflare? Controlla che i crawler AI entrino ancora

La protezione dai bot, "Block AI bots" e le regole WAF sono attive per impostazione predefinita in molte configurazioni Cloudflare. Possono respingere i crawler di ricerca AI senza alcun errore dalla tua parte.

Gratis · Senza registrazione · Risultati in 30 secondi

Cosa li blocca

Bot Fight Mode, il blocco dei bot AI, le verifiche gestite e le regole WAF personalizzate che colpiscono lo user agent di un crawler o la sua rete.

Cosa controlliamo

Le tue pagine scaricate come 16 crawler AI e di ricerca accanto a un normale browser, con il codice di stato e l'intestazione Cloudflare che rivela un blocco.

Tienilo sotto controllo

Le regole cambiano. Il monitoraggio ricontrolla le tue pagine chiave e ti invia un'email quando un crawler viene di nuovo bloccato.

Scegli il pacchetto completo

Dopo un redesign · Dopo il passaggio a Shopify · Dopo una modifica a robots.txt