Đã chuyển sang Cloudflare? Kiểm tra xem trình thu thập AI có còn vào được không
Chống bot, "Block AI bots" và quy tắc WAF được bật mặc định trong nhiều cấu hình Cloudflare. Chúng có thể chặn trình thu thập tìm kiếm AI mà phía bạn không thấy lỗi nào.
Miễn phí · Không cần đăng ký · Có kết quả sau 30 giây
Điều gì chặn chúng
Bot Fight Mode, chặn bot AI, thử thách được quản lý và quy tắc WAF tùy chỉnh khớp với user agent hoặc mạng của trình thu thập.
Chúng tôi kiểm tra gì
Các trang của bạn được tải với vai trò 16 trình thu thập AI và tìm kiếm bên cạnh một trình duyệt thông thường, kèm mã trạng thái và header Cloudflare cho thấy việc chặn.
Luôn nắm tình hình
Quy tắc thay đổi. Giám sát sẽ kiểm tra lại các trang chính của bạn và gửi email khi một trình thu thập lại bị chặn.
Sau khi thiết kế lại · Sau khi chuyển sang Shopify · Sau khi sửa robots.txt