Prešli ste na Cloudflare? Provjerite ulaze li AI crawleri i dalje

Zaštita od botova, "Block AI bots" i WAF pravila u mnogim su Cloudflare postavama uključeni prema zadanim postavkama. Mogu odbiti AI crawlere za pretraživanje bez ikakve pogreške s vaše strane.

Besplatno · Bez registracije · Rezultat za 30 sekundi

Što ih blokira

Bot Fight Mode, blokiranje AI botova, upravljani izazovi i prilagođena WAF pravila koja pogađaju user agent crawlera ili njegovu mrežu.

Što provjeravamo

Vaše stranice dohvaćene kao 16 AI crawlera i crawlera za pretraživanje uz običan preglednik, sa statusnim kodom i Cloudflare zaglavljem koje pokazuje blokadu.

Držite to pod kontrolom

Pravila se mijenjaju. Praćenje ponovno provjerava vaše ključne stranice i šalje vam e-poruku kad je neki crawler ponovno blokiran.

Uzmite kompletan paket

Nakon redizajna · Nakon prelaska na Shopify · Nakon promjene robots.txt