Pindah ke Cloudflare? Periksa apakah crawler AI masih bisa masuk
Perlindungan bot, "Block AI bots", dan aturan WAF aktif secara default di banyak penyiapan Cloudflare. Semua itu bisa menolak crawler penelusuran AI tanpa ada error apa pun di sisi Anda.
Gratis · Tanpa perlu mendaftar · Hasil dalam 30 detik
Apa yang memblokirnya
Bot Fight Mode, pemblokiran bot AI, managed challenge, dan aturan WAF kustom yang cocok dengan user agent crawler atau jaringannya.
Apa yang kami periksa
Halaman Anda diambil sebagai 16 crawler AI dan mesin pencari berdampingan dengan browser biasa, lengkap dengan kode status dan header Cloudflare yang menunjukkan pemblokiran.
Tetap terkendali
Aturan berubah. Pemantauan memeriksa ulang halaman utama Anda dan mengirim email saat ada crawler yang kembali terblokir.
Setelah desain ulang · Setelah pindah ke Shopify · Setelah mengubah robots.txt