robots.txt nėra Content-Signal
Jūsų robots.txt nėra eilutės Content-Signal. Ši neprivaloma eilutė nurodo, kaip galima naudoti jūsų turinį: paieškos rezultatuose, kaip DI atsakymų įvestį ar DI mokymui. Be jos niekas nesuges. Pridėkite ją, jei norite, kad naudojimo politika būtų užrašyta mašinoms suprantama forma.
Ką tai reiškia
Content-Signal eilutė nurodo, kaip galima naudoti jūsų turinį (paieškai, DI atsakymams, mokymui). Ji neprivaloma; pridėkite ją, jei norite politiką nurodyti aiškiai.
Kodėl tai svarbu DI paieškai
robots.txt tik nurodo, ar robotas gali atsisiųsti puslapį, bet ne tai, ką vėliau galima daryti su turiniu. Content-Signal, pristatytas Cloudflare Content Signals Policy, prideda tris raktus: search, ai-input (turinio naudojimas atsakant į klausimą realiuoju laiku) ir ai-train.
Robotai neprivalo jo paisyti, todėl AISeeWhy tai vertina kaip P3. Vis dėlto tai aiškus būdas atskirti „galite naudoti atsakymuose“ nuo „nemokykite modelių su šiuo turiniu“, kai įleidžiate robotą, galintį daryti abu dalykus, ir tai dokumentuoja jūsų politiką kiekvienam, kas skaito failą.
Kaip tai ištaisyti
- Nuspręskite savo politiką kiekvienam iš
search,ai-inputirai-train. - Pridėkite eilutę
Content-Signalrobots.txt grupėjeUser-agent: *, šalia jos Allow ir Disallow taisyklių. - Jei svetainė naudoja Cloudflare, patikrinkite, ar valdomas robots.txt jau neprideda šių signalų, kad nenurodytumėte jų du kartus.
- Palikite Allow ir Disallow taisykles kaip yra: Content-Signal jų nepakeičia. AISeeWhy ataskaitoje matysite įrodymus ir paruoštą įklijuoti pataisymą; vėliau paspauskite „Patikrinti dar kartą“, kad patvirtintumėte rezultatą.
Pavyzdys
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Allow: / Kaip įsitikinti, kad pataisymas suveikė
Atlikę pakeitimą, ataskaitoje paspauskite „Patikrinti dar kartą“: matysite, kas ištaisyta ir kaip pasikeitė balas.