Přešli jste na Cloudflare? Ověřte, že se AI crawlery stále dostanou dovnitř
Ochrana proti botům, „Block AI bots“ a pravidla WAF jsou v mnoha nastaveních Cloudflare zapnuté ve výchozím stavu. Mohou AI vyhledávací crawlery odmítnout, aniž byste u sebe viděli jakoukoli chybu.
Zdarma · Bez registrace · Výsledek za 30 sekund
Co je blokuje
Bot Fight Mode, blokování AI botů, spravované výzvy (managed challenge) a vlastní pravidla WAF, která odpovídají user agentu crawleru nebo jeho síti.
Co kontrolujeme
Vaše stránky stažené jako 16 AI a vyhledávacích crawlerů vedle běžného prohlížeče, se stavovým kódem a hlavičkou Cloudflare, která ukazuje blokování.
Mějte to pod kontrolou
Pravidla se mění. Monitorování znovu zkontroluje vaše klíčové stránky a pošle vám e-mail, když je některý crawler opět zablokován.