robots.txt-də Content-Signal yoxdur
robots.txt-nizdə Content-Signal sətri yoxdur. Bu istəyə bağlı sətir məzmununuzdan necə istifadə oluna biləcəyini bildirir: axtarış nəticələrində, AI cavabları üçün giriş məlumatı kimi və ya AI təlimi üçün. Onsuz heç nə sınmır. İstifadə siyasətinizin maşın tərəfindən oxuna bilən formada yazılmasını istəyirsinizsə, onu əlavə edin.
Nə deməkdir
Content-Signal sətri məzmununuzdan necə istifadə oluna biləcəyini (axtarış, AI cavabları, təlim) bildirir. Bu, istəyə bağlıdır; siyasəti açıq göstərmək istəyirsinizsə, əlavə edin.
AI axtarışı üçün niyə vacibdir
robots.txt yalnız botun səhifəni yükləyə bilib-bilmədiyini deyir, sonra məzmunla nə edilə biləcəyini yox. Cloudflare-in Content Signals Policy sənədində təqdim olunan Content-Signal üç açar əlavə edir: search, ai-input (məzmundan sualı real vaxtda cavablandırmaq üçün istifadə) və ai-train.
Botlar ona əməl etməyə məcbur deyil, buna görə AISeeWhy bunu P3 kimi qiymətləndirir. Bununla belə, hər ikisini edə bilən bota icazə verdikdə bu, "bundan cavablarda istifadə edə bilərsiniz" ilə "bunun üzərində təlim keçməyin" arasında aydın fərq qoymağın yoludur və faylı oxuyan hər kəs üçün siyasətinizi sənədləşdirir.
Necə düzəltmək olar
search,ai-inputvəai-trainüçün siyasətinizi müəyyən edin.- robots.txt-in
User-agent: *qrupunun içində, onun Allow və Disallow qaydalarının yanındaContent-Signalsətri əlavə edin. - Saytınız Cloudflare-dədirsə, onun idarə olunan robots.txt-inin bu siqnalları artıq əlavə edib-etmədiyini yoxlayın ki, onları iki dəfə yazmayasınız.
- Allow və Disallow qaydalarınızı olduğu kimi saxlayın: Content-Signal onları əvəz etmir. AISeeWhy hesabatı sübutu və yapışdırmağa hazır düzəlişi göstərir; nəticəni təsdiqləmək üçün sonra "Yenidən yoxla" düyməsini basın.
Nümunə
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Allow: / Düzəlişi necə təsdiqləmək olar
Dəyişiklikdən sonra hesabatda “Yenidən yoxla” düyməsini basın: o, nəyin düzəldildiyini və balın necə dəyişdiyini göstərir.