Cloudflare-re költözött? Ellenőrizze, hogy az AI-crawlerek még bejutnak-e
A botvédelem, a "Block AI bots" és a WAF-szabályok sok Cloudflare-beállításban alapértelmezetten be vannak kapcsolva. Elküldhetik az AI-keresőcrawlereket anélkül, hogy az Ön oldalán bármilyen hiba látszana.
Ingyenes · Regisztráció nélkül · Eredmény 30 másodperc alatt
Mi blokkolja őket
A Bot Fight Mode, az AI-botok blokkolása, a felügyelt kihívások és az egyéni WAF-szabályok, amelyek egy crawler user agentjére vagy hálózatára illeszkednek.
Mit ellenőrzünk
Az oldalait 16 AI- és keresőcrawlerként lekérve, egy normál böngésző mellett, az állapotkóddal és a blokkolást jelző Cloudflare-fejléccel.
Tartsa szemmel
A szabályok változnak. A monitorozás újraellenőrzi a kulcsoldalait, és e-mailt küld, ha egy crawlert ismét kizárnak.
Újratervezés után · Shopifyra költözés után · A robots.txt módosítása után