Cloudflare로 옮기셨나요? AI 크롤러가 여전히 들어오는지 확인하세요
많은 Cloudflare 설정에서 봇 차단, "Block AI bots", WAF 규칙이 기본으로 켜져 있습니다. 이 설정들은 사이트 쪽에 아무런 오류 없이 AI 검색 크롤러를 돌려보낼 수 있습니다.
무료 · 가입 불필요 · 30초 만에 결과
무엇이 막고 있나
Bot Fight Mode, AI 봇 차단, 관리형 챌린지, 그리고 크롤러의 User-Agent나 네트워크와 일치하는 사용자 지정 WAF 규칙입니다.
점검 내용
16개 AI·검색 크롤러로 가져온 페이지를 일반 브라우저와 나란히 보여 주며, 상태 코드와 차단을 나타내는 Cloudflare 헤더도 함께 표시합니다.
계속 관리하기
규칙은 바뀝니다. 모니터링이 핵심 페이지를 다시 점검하고 크롤러가 다시 차단되면 이메일로 알려 드립니다.