robots.txt ni oʻzgartirdingizmi? Har bir AI krauleri uni qanday oʻqishini koʻring
Notoʻgʻri guruhdagi bitta qator faqat AI oʻqitishini bloklamoqchi boʻlganingizda ChatGPT qidiruvini bloklab qoʻyishi mumkin. 16 ta krauler uchun natijani tekshiring.
Bepul · Roʻyxatdan oʻtmasdan · Natija 30 soniyada
Qaysi guruh amal qiladi
Krauler * guruhiga emas, oʻz nomi koʻrsatilgan guruhga amal qiladi; bu koʻplab sayt egalarini hayron qoldiradi.
Qidiruv va oʻqitish
Xohlasangiz, oʻqitish kraulerlarini bloklang, sizni AI qidiruv javoblariga olib chiqadiganlarini esa qoldiring.
Aniq tuzatish
Oʻzgartirilishi kerak boʻlgan qatorlar, qoʻyishga tayyor, va tasdiqlash uchun qayta tekshiruv.
Cloudflare ga oʻtgandan keyin · Qayta dizayndan keyin · Shopify ga oʻtgandan keyin