GPTBot
GPTBot là trình thu thập của OpenAI cho nội dung có thể được dùng để huấn luyện các mô hình nền tảng AI tạo sinh của hãng. Cấm nó trong robots.txt báo cho OpenAI không dùng nội dung của bạn để huấn luyện. Chặn nó không loại bạn khỏi câu trả lời tìm kiếm của ChatGPT, vốn phụ thuộc vào OAI-SearchBot.
Chức năng
OpenAI cho biết GPTBot được dùng để làm cho các mô hình nền tảng AI tạo sinh của hãng hữu ích và an toàn hơn. Nó thu thập nội dung có thể được dùng để huấn luyện các mô hình đó, và việc cấm GPTBot cho biết nội dung của trang không nên được dùng để huấn luyện.
Có cho phép hay không là quyết định về chính sách, không phải về khả năng hiển thị. Tìm kiếm ChatGPT dùng một trình thu thập riêng là OAI-SearchBot, và OpenAI nêu rõ hai thiết lập này độc lập với nhau. Khi cả hai đều được cho phép, OpenAI cho biết có thể dùng kết quả của một lần thu thập cho cả hai mục đích để tránh thu thập hai lần.
Trong nghiên cứu 2026-11 của chúng tôi, 21.4% trang web phổ biến có robots.txt đã chặn bot này. →
Token robots.txt
GPTBot
Chuỗi user agent
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbotCách cho phép
User-agent: GPTBot
Allow: /Cách chặn
User-agent: GPTBot
Disallow: /Cách xác minh lượt truy cập thật
OpenAI công bố các dải IP mà tác nhân này dùng dưới dạng tệp JSON. Hãy đối chiếu IP nguồn của yêu cầu với các dải đó; yêu cầu tự nhận là GPTBot nhưng đến từ địa chỉ khác thì không phải của OpenAI. OpenAI lưu ý số phiên bản trong user agent có thể thay đổi, vì vậy hãy so khớp token GPTBot thay vì toàn bộ chuỗi.
Kiểm tra xem trang của bạn có cho nó vào không →
Các trình thu thập dữ liệu của OpenAI: GPTBot, OAI-SearchBot và ChatGPT-User →