robots.txt melarang GPTBot
robots.disallowed
Artinya
Aturan robots.txt Anda mencegah GPTBot mengambil /.
Prioritas
P1–P3, menurut jenis crawler
Cara memperbaikinya
Jalankan pemeriksaan gratis untuk halaman Anda. Laporan menunjukkan bukti temuan ini di situs Anda dan perbaikan siap tempel: perubahan robots.txt, aturan Cloudflare, markup JSON-LD, draf llms.txt, atau instruksi singkat.
Cara memastikan perbaikannya
Setelah perubahan, tekan "Periksa lagi" pada laporan: laporan mencantumkan apa yang diperbaiki dan bagaimana skor berubah.