Google-Extended
Google-Extended là một token robots.txt, không phải trình thu thập riêng. Nó kiểm soát việc nội dung do Google thu thập có thể được dùng để huấn luyện các mô hình Gemini trong tương lai và để làm căn cứ trong Gemini Apps và Vertex AI hay không. Google cho biết nó không ảnh hưởng đến việc một trang có trong Google Search.
Chức năng
Google-Extended không có user agent riêng. Việc thu thập do các user agent hiện có của Google thực hiện, còn token Google-Extended đóng vai trò kiểm soát: nó cho Google biết nội dung đã thu thập có thể được dùng để huấn luyện các thế hệ mô hình Gemini trong tương lai và để làm căn cứ trong Gemini Apps và Vertex AI hay không.
Google nêu rõ Google-Extended không ảnh hưởng đến việc một trang có trong Google Search. Các tính năng AI trong Tìm kiếm, như AI Overviews, được điều chỉnh bởi quy tắc Googlebot và các điều khiển đoạn trích, không phải bởi token này.
Trong nghiên cứu 2026-11 của chúng tôi, 18.1% trang web phổ biến có robots.txt đã chặn bot này. →
Token robots.txt
Google-Extended
Cách cho phép
User-agent: Google-Extended
Allow: /Cách chặn
User-agent: Google-Extended
Disallow: /Cách xác minh lượt truy cập thật
Không có gì để xác minh trong nhật ký của bạn: Google-Extended không bao giờ xuất hiện như một user agent. Các yêu cầu đằng sau nó đến từ trình thu thập thông thường của Google, bạn có thể xác minh bằng tra cứu DNS ngược (googlebot.com, google.com hoặc googleusercontent.com) rồi tra cứu xuôi, hoặc đối chiếu với dải IP Google đã công bố.
Kiểm tra xem trang của bạn có cho nó vào không →
robots.txt cho trình thu thập dữ liệu AI: nên cho phép gì, chặn gì →