Cloudflare वर गेलात? AI क्रॉलर अजूनही आत येतात का ते तपासा

अनेक Cloudflare सेटअपमध्ये बॉट संरक्षण, "Block AI bots" आणि WAF नियम डीफॉल्टनुसार चालू असतात. ते तुमच्या बाजूला कोणतीही त्रुटी न दाखवता AI सर्च क्रॉलरना परत पाठवू शकतात.

मोफत · साइन-अप नाही · 30 सेकंदांत निकाल

त्यांना काय ब्लॉक करते

Bot Fight Mode, AI बॉट ब्लॉकिंग, मॅनेज्ड चॅलेंज आणि क्रॉलरच्या user agent शी किंवा त्याच्या नेटवर्कशी जुळणारे कस्टम WAF नियम.

आम्ही काय तपासतो

सामान्य ब्राउझरच्या शेजारी 16 AI आणि सर्च क्रॉलर म्हणून मिळवलेली तुमची पेज, स्टेटस कोड आणि ब्लॉक दाखवणाऱ्या Cloudflare हेडरसह.

नियंत्रणात ठेवा

नियम बदलतात. मॉनिटरिंग तुमची मुख्य पेज पुन्हा तपासते आणि एखादा क्रॉलर पुन्हा बाहेर ठेवला गेल्यास तुम्हाला ईमेल करते.

संपूर्ण पॅकेज घ्या

रीडिझाइननंतर · Shopify वर गेल्यानंतर · robots.txt बदलल्यानंतर