robots.txt ਵਿੱਚ ਕੋਈ Content-Signal ਨਹੀਂ
ਤੁਹਾਡੇ robots.txt ਵਿੱਚ ਕੋਈ Content-Signal ਲਾਈਨ ਨਹੀਂ। ਇਹ ਵਿਕਲਪਿਕ ਲਾਈਨ ਦੱਸਦੀ ਹੈ ਕਿ ਤੁਹਾਡੀ ਸਮੱਗਰੀ ਕਿਵੇਂ ਵਰਤੀ ਜਾ ਸਕਦੀ ਹੈ: ਸਰਚ ਨਤੀਜਿਆਂ ਵਿੱਚ, AI ਜਵਾਬਾਂ ਲਈ ਇਨਪੁਟ ਵਜੋਂ, ਜਾਂ AI ਸਿਖਲਾਈ ਲਈ। ਇਸਦੇ ਬਿਨਾਂ ਕੁਝ ਨਹੀਂ ਟੁੱਟਦਾ। ਜੇ ਤੁਸੀਂ ਆਪਣੀ ਵਰਤੋਂ ਨੀਤੀ ਮਸ਼ੀਨ ਦੇ ਪੜ੍ਹਨ ਯੋਗ ਰੂਪ ਵਿੱਚ ਲਿਖਣਾ ਚਾਹੁੰਦੇ ਹੋ ਤਾਂ ਇੱਕ ਜੋੜੋ।
ਇਸਦਾ ਮਤਲਬ ਕੀ ਹੈ
Content-Signal ਲਾਈਨ ਦੱਸਦੀ ਹੈ ਕਿ ਤੁਹਾਡੀ ਸਮੱਗਰੀ ਕਿਵੇਂ ਵਰਤੀ ਜਾ ਸਕਦੀ ਹੈ (ਸਰਚ, AI ਜਵਾਬ, ਸਿਖਲਾਈ)। ਇਹ ਵਿਕਲਪਿਕ ਹੈ; ਜੇ ਤੁਸੀਂ ਨੀਤੀ ਸਾਫ਼ ਦੱਸਣਾ ਚਾਹੁੰਦੇ ਹੋ ਤਾਂ ਇਸਨੂੰ ਜੋੜੋ।
AI ਸਰਚ ਲਈ ਇਹ ਕਿਉਂ ਮਾਇਨੇ ਰੱਖਦਾ ਹੈ
robots.txt ਸਿਰਫ਼ ਇਹ ਦੱਸਦਾ ਹੈ ਕਿ ਕ੍ਰੌਲਰ ਪੰਨਾ ਲਿਆ ਸਕਦਾ ਹੈ ਜਾਂ ਨਹੀਂ, ਇਹ ਨਹੀਂ ਕਿ ਬਾਅਦ ਵਿੱਚ ਸਮੱਗਰੀ ਨਾਲ ਕੀ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ। Content-Signal, ਜੋ Cloudflare ਦੀ Content Signals Policy ਵਿੱਚ ਪੇਸ਼ ਕੀਤਾ ਗਿਆ, ਤਿੰਨ ਕੁੰਜੀਆਂ ਜੋੜਦਾ ਹੈ: search, ai-input (ਕਿਸੇ ਸਵਾਲ ਦਾ ਉਸੇ ਵੇਲੇ ਜਵਾਬ ਦੇਣ ਲਈ ਸਮੱਗਰੀ ਵਰਤਣਾ) ਅਤੇ ai-train।
ਕ੍ਰੌਲਰਾਂ ਲਈ ਇਸਨੂੰ ਮੰਨਣਾ ਲਾਜ਼ਮੀ ਨਹੀਂ, ਇਸ ਲਈ AISeeWhy ਇਸਨੂੰ P3 ਦਰਜਾ ਦਿੰਦਾ ਹੈ। ਫਿਰ ਵੀ, ਜਦੋਂ ਤੁਸੀਂ ਕਿਸੇ ਅਜਿਹੇ ਕ੍ਰੌਲਰ ਨੂੰ ਇਜਾਜ਼ਤ ਦਿੰਦੇ ਹੋ ਜੋ ਦੋਵੇਂ ਕੰਮ ਕਰ ਸਕਦਾ ਹੈ, ਤਾਂ ਇਹ "ਤੁਸੀਂ ਇਸਨੂੰ ਜਵਾਬਾਂ ਵਿੱਚ ਵਰਤ ਸਕਦੇ ਹੋ" ਨੂੰ "ਇਸ 'ਤੇ ਸਿਖਲਾਈ ਨਾ ਕਰੋ" ਤੋਂ ਵੱਖ ਕਰਨ ਦਾ ਸਾਫ਼ ਤਰੀਕਾ ਹੈ, ਅਤੇ ਇਹ ਫਾਈਲ ਪੜ੍ਹਨ ਵਾਲੇ ਹਰ ਕਿਸੇ ਲਈ ਤੁਹਾਡੀ ਨੀਤੀ ਦਰਜ ਕਰਦਾ ਹੈ।
ਇਸਨੂੰ ਕਿਵੇਂ ਠੀਕ ਕਰੀਏ
search,ai-inputਅਤੇai-trainਵਿੱਚੋਂ ਹਰੇਕ ਲਈ ਆਪਣੀ ਨੀਤੀ ਤੈਅ ਕਰੋ।- robots.txt ਦੇ
User-agent: *ਗਰੁੱਪ ਵਿੱਚ, ਉਸਦੇ Allow ਅਤੇ Disallow ਨਿਯਮਾਂ ਦੇ ਨਾਲ, ਇੱਕContent-Signalਲਾਈਨ ਜੋੜੋ। - ਜੇ ਤੁਹਾਡੀ ਸਾਈਟ Cloudflare 'ਤੇ ਹੈ, ਤਾਂ ਜਾਂਚੋ ਕਿ ਕੀ ਇਸਦਾ managed robots.txt ਪਹਿਲਾਂ ਹੀ ਇਹ ਸਿਗਨਲ ਜੋੜਦਾ ਹੈ, ਤਾਂ ਜੋ ਤੁਸੀਂ ਇਨ੍ਹਾਂ ਨੂੰ ਦੋ ਵਾਰ ਨਾ ਦੱਸੋ।
- ਆਪਣੇ Allow ਅਤੇ Disallow ਨਿਯਮ ਜਿਵੇਂ ਹਨ ਉਵੇਂ ਰੱਖੋ: Content-Signal ਉਨ੍ਹਾਂ ਦੀ ਥਾਂ ਨਹੀਂ ਲੈਂਦਾ। AISeeWhy ਰਿਪੋਰਟ ਸਬੂਤ ਅਤੇ ਪੇਸਟ ਕਰਨ ਲਈ ਤਿਆਰ ਹੱਲ ਦਿਖਾਉਂਦੀ ਹੈ; ਨਤੀਜੇ ਦੀ ਪੁਸ਼ਟੀ ਲਈ ਬਾਅਦ ਵਿੱਚ "ਦੁਬਾਰਾ ਜਾਂਚੋ" ਚਲਾਓ।
ਮਿਸਾਲ
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Allow: / ਹੱਲ ਦੀ ਪੁਸ਼ਟੀ ਕਿਵੇਂ ਕਰਨੀ ਹੈ
ਬਦਲਾਅ ਤੋਂ ਬਾਅਦ, ਰਿਪੋਰਟ 'ਤੇ "ਦੁਬਾਰਾ ਜਾਂਚੋ" ਦਬਾਓ: ਇਹ ਦੱਸਦੀ ਹੈ ਕਿ ਕੀ ਠੀਕ ਹੋਇਆ ਅਤੇ ਸਕੋਰ ਕਿਵੇਂ ਬਦਲਿਆ।