Passato a Cloudflare? Controlla che i crawler AI entrino ancora
La protezione dai bot, "Block AI bots" e le regole WAF sono attive per impostazione predefinita in molte configurazioni Cloudflare. Possono respingere i crawler di ricerca AI senza alcun errore dalla tua parte.
Gratis · Senza registrazione · Risultati in 30 secondi
Cosa li blocca
Bot Fight Mode, il blocco dei bot AI, le verifiche gestite e le regole WAF personalizzate che colpiscono lo user agent di un crawler o la sua rete.
Cosa controlliamo
Le tue pagine scaricate come 16 crawler AI e di ricerca accanto a un normale browser, con il codice di stato e l'intestazione Cloudflare che rivela un blocco.
Tienilo sotto controllo
Le regole cambiano. Il monitoraggio ricontrolla le tue pagine chiave e ti invia un'email quando un crawler viene di nuovo bloccato.
Dopo un redesign · Dopo il passaggio a Shopify · Dopo una modifica a robots.txt