Applebot-Extended
Applebot-Extended ਇੱਕ robots.txt ਟੋਕਨ ਹੈ, ਕ੍ਰੌਲਰ ਨਹੀਂ। ਇਸਨੂੰ ਮਨ੍ਹਾ ਕਰਨਾ Apple ਨੂੰ ਦੱਸਦਾ ਹੈ ਕਿ Applebot ਵੱਲੋਂ ਕ੍ਰੌਲ ਕੀਤੀ ਸਮੱਗਰੀ ਉਸਦੇ generative foundation models ਦੀ ਸਿਖਲਾਈ ਲਈ ਨਾ ਵਰਤੀ ਜਾਵੇ। Apple ਕਹਿੰਦਾ ਹੈ ਕਿ ਇਸਨੂੰ ਮਨ੍ਹਾ ਕਰਨ ਵਾਲੇ ਪੰਨੇ ਫਿਰ ਵੀ Apple ਦੇ ਸਰਚ ਨਤੀਜਿਆਂ ਵਿੱਚ ਦਿਸ ਸਕਦੇ ਹਨ, ਇਸ ਲਈ ਇਸਨੂੰ ਬਲੌਕ ਕਰਨ ਨਾਲ Siri ਜਾਂ Spotlight ਵਿੱਚ ਦਿੱਖ 'ਤੇ ਅਸਰ ਨਹੀਂ ਪੈਂਦਾ।
ਇਸਨੂੰ ਇਜਾਜ਼ਤ ਕਿਵੇਂ ਦੇਈਏ
User-agent: Applebot-Extended
Allow: / ਇਸਨੂੰ ਬਲੌਕ ਕਿਵੇਂ ਕਰੀਏ
User-agent: Applebot-Extended
Disallow: / ਇਹ ਕੀ ਕਰਦਾ ਹੈ
Apple ਕਹਿੰਦਾ ਹੈ ਕਿ Applebot-Extended ਵੈੱਬ ਪੰਨੇ ਕ੍ਰੌਲ ਨਹੀਂ ਕਰਦਾ। ਇਹ ਸਿਰਫ਼ ਇਹ ਤੈਅ ਕਰਨ ਲਈ ਵਰਤਿਆ ਜਾਂਦਾ ਹੈ ਕਿ Applebot ਵੱਲੋਂ ਕ੍ਰੌਲ ਕੀਤਾ ਡਾਟਾ ਕਿਵੇਂ ਵਰਤਿਆ ਜਾ ਸਕਦਾ ਹੈ। ਇਸਨੂੰ ਮਨ੍ਹਾ ਕਰਨ ਨਾਲ ਤੁਹਾਡੀ ਸਮੱਗਰੀ Apple Intelligence ਵਰਗੇ generative AI ਫੀਚਰ ਚਲਾਉਣ ਵਾਲੇ Apple ਦੇ foundation models ਦੀ ਸਿਖਲਾਈ ਤੋਂ ਬਾਹਰ ਰਹਿੰਦੀ ਹੈ।
Applebot-Extended ਨੂੰ ਮਨ੍ਹਾ ਕਰਨ ਵਾਲੇ ਪੰਨੇ ਫਿਰ ਵੀ ਸਰਚ ਨਤੀਜਿਆਂ ਵਿੱਚ ਸ਼ਾਮਲ ਹੋ ਸਕਦੇ ਹਨ, ਅਤੇ Apple ਕਹਿੰਦਾ ਹੈ ਕਿ ਸਰਚ ਰੈਂਕਿੰਗ ਵਿੱਚ ਇਸ ਨਿਯਮ ਨੂੰ ਨਹੀਂ ਗਿਣਿਆ ਜਾਂਦਾ। ਕ੍ਰੌਲਿੰਗ ਖੁਦ Applebot ਟੋਕਨ ਨਾਲ ਕੰਟਰੋਲ ਹੁੰਦੀ ਹੈ।
ਸਾਡੇ 2026-11 ਦੇ ਅਧਿਐਨ ਵਿੱਚ, robots.txt ਵਾਲੀਆਂ ਪ੍ਰਸਿੱਧ ਸਾਈਟਾਂ ਵਿੱਚੋਂ 18.0% ਨੇ ਇਸਨੂੰ ਬਲੌਕ ਕੀਤਾ। →
robots.txt ਟੋਕਨ
Applebot-Extended
ਅਸਲ ਫੇਰੀਆਂ ਦੀ ਪੁਸ਼ਟੀ ਕਿਵੇਂ ਕਰੀਏ
ਤੁਹਾਡੇ ਲੌਗਾਂ ਵਿੱਚ ਪ੍ਰਮਾਣਿਤ ਕਰਨ ਲਈ ਕੁਝ ਨਹੀਂ: Applebot-Extended ਕਦੇ ਵੀ ਯੂਜ਼ਰ ਏਜੰਟ ਵਜੋਂ ਨਹੀਂ ਦਿਸਦਾ। ਅਸਲ ਬੇਨਤੀਆਂ Applebot ਤੋਂ ਆਉਂਦੀਆਂ ਹਨ, ਜਿਸਨੂੰ ਤੁਸੀਂ reverse DNS (applebot.apple.com) ਨਾਲ ਜਾਂ Apple ਦੀਆਂ ਪ੍ਰਕਾਸ਼ਿਤ IP ਰੇਂਜਾਂ ਨਾਲ ਪ੍ਰਮਾਣਿਤ ਕਰ ਸਕਦੇ ਹੋ।
ਜਾਂਚੋ ਕਿ ਕੀ ਤੁਹਾਡੀ ਸਾਈਟ ਇਸਨੂੰ ਅੰਦਰ ਆਉਣ ਦਿੰਦੀ ਹੈ →
AI ਕ੍ਰੌਲਰਾਂ ਲਈ robots.txt: ਕਿਸਨੂੰ ਇਜਾਜ਼ਤ ਦੇਣੀ ਹੈ, ਕਿਸਨੂੰ ਬਲੌਕ ਕਰਨਾ ਹੈ →