GPTBot ਨੂੰ ਕਿਤੇ ਹੋਰ ਰੀਡਾਇਰੈਕਟ ਕੀਤਾ ਜਾਂਦਾ ਹੈ
ਇਸ ਕ੍ਰੌਲਰ ਦੇ ਯੂਜ਼ਰ ਏਜੰਟ ਵਾਲੀ ਬੇਨਤੀ ਉਸ ਪੰਨੇ ਤੋਂ ਇਲਾਵਾ ਕਿਤੇ ਹੋਰ ਪਹੁੰਚੀ ਜਿੱਥੇ ਬ੍ਰਾਊਜ਼ਰ ਪਹੁੰਚਦਾ ਹੈ: ਕਿਸੇ ਹੋਰ ਹੋਸਟ 'ਤੇ, ਜਾਂ ਅਜਿਹੇ path 'ਤੇ ਜਿਸ ਵਿੱਚ login, signin, captcha ਜਾਂ blocked ਹੈ। ਯੂਜ਼ਰ ਏਜੰਟ ਨੂੰ ਨਿਸ਼ਾਨਾ ਬਣਾਉਣ ਵਾਲਾ ਰੀਡਾਇਰੈਕਟ ਨਿਯਮ ਹਟਾਓ, ਤਾਂ ਜੋ ਕ੍ਰੌਲਰ ਉਸੇ URL 'ਤੇ ਪਹੁੰਚੇ ਜਿੱਥੇ ਲੋਕ ਪਹੁੰਚਦੇ ਹਨ।
ਇਸਦਾ ਮਤਲਬ ਕੀ ਹੈ
GPTBot ਯੂਜ਼ਰ ਏਜੰਟ ਵਾਲੀ ਬੇਨਤੀ https://example.com/b 'ਤੇ ਖ਼ਤਮ ਹੁੰਦੀ ਹੈ, ਨਾ ਕਿ ਉਸ ਪੰਨੇ 'ਤੇ ਜੋ ਬ੍ਰਾਊਜ਼ਰ ਨੂੰ ਮਿਲਦਾ ਹੈ।
AI ਸਰਚ ਲਈ ਇਹ ਕਿਉਂ ਮਾਇਨੇ ਰੱਖਦਾ ਹੈ
ਜਿਹੜਾ ਕ੍ਰੌਲਰ ਲੌਗਇਨ ਫਾਰਮ, captcha ਪੰਨੇ ਜਾਂ ਕਿਸੇ ਹੋਰ ਡੋਮੇਨ 'ਤੇ ਰੀਡਾਇਰੈਕਟ ਹੁੰਦਾ ਹੈ, ਉਹ ਕਦੇ ਉਹ ਸਮੱਗਰੀ ਨਹੀਂ ਪੜ੍ਹਦਾ ਜਿਸ ਲਈ ਉਸਨੂੰ ਭੇਜਿਆ ਗਿਆ ਸੀ। ਫਿਰ ਜਵਾਬ ਇੰਜਣ ਜਾਂ ਤਾਂ ਪੰਨਾ ਛੱਡ ਦਿੰਦੇ ਹਨ ਜਾਂ ਸਮੱਗਰੀ ਨੂੰ ਉਸ URL ਨਾਲ ਜੋੜ ਦਿੰਦੇ ਹਨ ਜਿੱਥੇ ਉਹ ਪਹੁੰਚਿਆ, ਜੋ ਅਕਸਰ ਇੱਕ ਆਮ ਪੰਨਾ ਹੁੰਦਾ ਹੈ ਜਿਸ ਵਿੱਚ ਹਵਾਲਾ ਦੇਣ ਲਾਇਕ ਕੁਝ ਨਹੀਂ ਹੁੰਦਾ।
ਇਹ ਰੀਡਾਇਰੈਕਟ ਆਮ ਤੌਰ 'ਤੇ ਬੋਟ ਸੁਰੱਖਿਆ, paywall, ਮੈਂਬਰਸ਼ਿਪ ਜਾਂ geo ਨਿਯਮਾਂ ਤੋਂ ਆਉਂਦੇ ਹਨ ਜੋ ਯੂਜ਼ਰ ਏਜੰਟ 'ਤੇ ਕੰਮ ਕਰਦੇ ਹਨ। OAI-SearchBot, Claude-User ਅਤੇ PerplexityBot ਵਰਗੇ ਸਰਚ ਅਤੇ ਯੂਜ਼ਰ ਕ੍ਰੌਲਰ ਸਿਖਲਾਈ ਕ੍ਰੌਲਰਾਂ ਵਾਂਗ ਹੀ ਪ੍ਰਭਾਵਿਤ ਹੁੰਦੇ ਹਨ, ਇਸ ਲਈ ਇਸ ਖੋਜ ਦਾ ਦਰਜਾ ਕ੍ਰੌਲਰ ਦੀ ਭੂਮਿਕਾ ਮੁਤਾਬਕ ਤੈਅ ਹੁੰਦਾ ਹੈ।
ਇਸਨੂੰ ਕਿਵੇਂ ਠੀਕ ਕਰੀਏ
- ਖੋਜ ਵਿੱਚ ਅੰਤਿਮ URL ਪੜ੍ਹ ਕੇ ਦੇਖੋ ਕਿ ਕ੍ਰੌਲਰ ਨੂੰ ਕਿੱਥੇ ਭੇਜਿਆ ਗਿਆ। AISeeWhy ਰਿਪੋਰਟ ਸਬੂਤ ਅਤੇ ਪੇਸਟ ਕਰਨ ਲਈ ਤਿਆਰ ਹੱਲ ਦਿਖਾਉਂਦੀ ਹੈ; ਨਤੀਜੇ ਦੀ ਪੁਸ਼ਟੀ ਲਈ ਬਾਅਦ ਵਿੱਚ "ਦੁਬਾਰਾ ਜਾਂਚੋ" ਚਲਾਓ।
- ਆਪਣੇ CDN ਵਿੱਚ ਰੀਡਾਇਰੈਕਟ ਨਿਯਮ (Cloudflare Redirect Rules, Page Rules ਜਾਂ Workers), nginx ਵਿੱਚ
return 301/302ਜਾਂrewriteਬਲਾਕ, ਅਤੇ Apache ਵਿੱਚ ਯੂਜ਼ਰ ਏਜੰਟ ਸ਼ਰਤ ਵਾਲੀਆਂRewriteRuleਲਾਈਨਾਂ ਜਾਂਚੋ। - WordPress ਜਾਂ Shopify ਵਿੱਚ, ਮੈਂਬਰਸ਼ਿਪ, ਉਮਰ ਜਾਂਚ, maintenance mode ਅਤੇ geo-redirect ਐਪਸ ਦੇਖੋ ਜੋ ਅਣਜਾਣ ਵਿਜ਼ਟਰਾਂ ਨੂੰ ਲੌਗਇਨ ਜਾਂ ਦੇਸ਼ ਵਾਲੇ ਪੰਨੇ 'ਤੇ ਭੇਜਦੇ ਹਨ।
- ਕ੍ਰੌਲਰ ਨੂੰ ਨਿਯਮ ਤੋਂ ਛੋਟ ਦਿਓ, ਜਾਂ ਰੀਡਾਇਰੈਕਟ ਕਰਨ ਦੀ ਥਾਂ ਮੂਲ URL 'ਤੇ ਬੰਦ ਸਮੱਗਰੀ ਦਾ ਜਨਤਕ ਸਾਰ ਦਿਖਾਓ।
ਹੱਲ ਦੀ ਪੁਸ਼ਟੀ ਕਿਵੇਂ ਕਰਨੀ ਹੈ
ਬਦਲਾਅ ਤੋਂ ਬਾਅਦ, ਰਿਪੋਰਟ 'ਤੇ "ਦੁਬਾਰਾ ਜਾਂਚੋ" ਦਬਾਓ: ਇਹ ਦੱਸਦੀ ਹੈ ਕਿ ਕੀ ਠੀਕ ਹੋਇਆ ਅਤੇ ਸਕੋਰ ਕਿਵੇਂ ਬਦਲਿਆ।