Přešli jste na Cloudflare? Ověřte, že se AI crawlery stále dostanou dovnitř

Ochrana proti botům, „Block AI bots“ a pravidla WAF jsou v mnoha nastaveních Cloudflare zapnuté ve výchozím stavu. Mohou AI vyhledávací crawlery odmítnout, aniž byste u sebe viděli jakoukoli chybu.

Zdarma · Bez registrace · Výsledek za 30 sekund

Co je blokuje

Bot Fight Mode, blokování AI botů, spravované výzvy (managed challenge) a vlastní pravidla WAF, která odpovídají user agentu crawleru nebo jeho síti.

Co kontrolujeme

Vaše stránky stažené jako 16 AI a vyhledávacích crawlerů vedle běžného prohlížeče, se stavovým kódem a hlavičkou Cloudflare, která ukazuje blokování.

Mějte to pod kontrolou

Pravidla se mění. Monitorování znovu zkontroluje vaše klíčové stránky a pošle vám e-mail, když je některý crawler opět zablokován.

Získat kompletní balíček

Po redesignu · Po přechodu na Shopify · Po změně robots.txt