Googlebot

Google · Enjin carian

Googlebot ialah perangkak utama Google untuk membina indeks cariannya. Google menyatakan peraturan robots.txt untuk Googlebot ialah kawalan bagi cara laman dirangkak untuk Carian, termasuk ciri AI seperti AI Overviews dan AI Mode. Menyekatnya mengeluarkan halaman anda daripada Carian Google dan jawapan AI tersebut.

Fungsinya

Googlebot digunakan untuk mencari maklumat bagi membina indeks carian Google. Pilihan perangkakan yang ditujukan kepada token Googlebot menjejaskan Carian Google dan produk seperti Google Images, Video, Google News dan Discover. Ia berjalan sebagai perangkak telefon pintar dan desktop; kedua-duanya mematuhi peraturan Googlebot yang sama, dan Google menyatakan perangkak umumnya sentiasa mematuhi robots.txt apabila merangkak secara automatik.

Dokumentasi Google tentang ciri AI menerangkan peraturan Googlebot sebagai kawalan untuk Carian, termasuk AI Overviews dan AI Mode, dan merujuk nosnippet, data-nosnippet, max-snippet serta noindex untuk mengehadkan apa yang dipaparkan. Penggunaan untuk latihan Gemini dikawal secara berasingan oleh Google-Extended.

Dalam kajian 2026-11 kami, 2.7% laman popular yang mempunyai robots.txt telah menyekatnya. →

Token robots.txt

Googlebot

Rentetan user agent

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36

Cara membenarkannya

User-agent: Googlebot
Allow: /

Cara menyekatnya

User-agent: Googlebot
Disallow: /

Cara mengesahkan lawatan sebenar

Google menyatakan rentetan user agent boleh dipalsukan dan mengesyorkan semakan DNS dua langkah. Jalankan carian DNS songsang pada IP yang membuat permintaan: nama hos patut berakhir dengan googlebot.com, google.com atau googleusercontent.com. Kemudian jalankan carian ke hadapan pada nama hos itu dan sahkan ia mengembalikan IP yang sama. Google juga menerbitkan julat IP perangkak umumnya sebagai JSON, supaya anda boleh memadankan alamat secara automatik.

Semak sama ada laman anda membenarkannya masuk →

AEO vs SEO: apa yang sama dan apa yang berubah untuk jawapan AI →