Sitemap ਲਿਆ ਨਹੀਂ ਜਾ ਸਕਦਾ (ਸਥਿਤੀ 403)
sitemap ਦੱਸਿਆ ਗਿਆ ਹੈ ਜਾਂ ਉਸਦੀ ਉਮੀਦ ਹੈ, ਪਰ ਉਸਨੂੰ ਲਿਆਉਣਾ ਗਲਤੀ, 401, 403, 429 ਜਾਂ 5xx ਸਥਿਤੀ ਨਾਲ ਫੇਲ੍ਹ ਹੋ ਗਿਆ, ਇਸ ਲਈ ਹੋ ਸਕਦਾ ਹੈ ਕ੍ਰੌਲਰ ਵੀ ਇਸਨੂੰ ਨਾ ਪੜ੍ਹ ਸਕਣ। ਆਡਿਟ ਇਸਨੂੰ ਬ੍ਰਾਊਜ਼ਰ ਵਜੋਂ ਲਿਆਉਂਦਾ ਹੈ। sitemap URL ਨੂੰ ਜਨਤਕ ਬਣਾਓ ਅਤੇ ਇਸਨੂੰ ਬੋਟ ਚੈਲੰਜਾਂ ਅਤੇ rate limits ਤੋਂ ਛੋਟ ਦਿਓ।
ਇਸਦਾ ਮਤਲਬ ਕੀ ਹੈ
ਇੱਕ sitemap ਮਿਲਿਆ, ਪਰ ਇਸਨੇ ਸਥਿਤੀ 403 ਨਾਲ ਜਵਾਬ ਦਿੱਤਾ ਜਾਂ ਜਵਾਬ ਨਹੀਂ ਦਿੱਤਾ, ਇਸ ਲਈ ਹੋ ਸਕਦਾ ਹੈ ਕ੍ਰੌਲਰ ਵੀ ਇਸਨੂੰ ਨਾ ਵਰਤ ਸਕਣ। ਜਾਂਚੋ ਕਿ ਤੁਹਾਡੀ ਫਾਇਰਵਾਲ ਕ੍ਰੌਲਰਾਂ ਨੂੰ ਇਹ ਲੈਣ ਦਿੰਦੀ ਹੈ।
AI ਸਰਚ ਲਈ ਇਹ ਕਿਉਂ ਮਾਇਨੇ ਰੱਖਦਾ ਹੈ
403 ਜਾਂ ਸਰਵਰ ਗਲਤੀ ਵਾਪਸ ਕਰਨ ਵਾਲਾ sitemap ਗਾਇਬ ਹੋਣ ਦੇ ਬਰਾਬਰ ਹੈ: ਕ੍ਰੌਲਰ ਇਸ ਤੋਂ ਨਵੇਂ ਜਾਂ ਬਦਲੇ ਪੰਨਿਆਂ ਬਾਰੇ ਨਹੀਂ ਜਾਣ ਸਕਦੇ। ਬੋਟ ਸੁਰੱਖਿਆ ਇੱਕ ਆਮ ਕਾਰਨ ਹੈ, ਕਿਉਂਕਿ sitemap ਬੇਨਤੀਆਂ ਲਗਭਗ ਪੂਰੀ ਤਰ੍ਹਾਂ ਕ੍ਰੌਲਰਾਂ ਤੋਂ ਆਉਂਦੀਆਂ ਹਨ, ਜਿਨ੍ਹਾਂ ਨੂੰ ਰੋਕਣ ਲਈ ਹੀ ਉਹ ਨਿਯਮ ਬਣੇ ਹਨ।
ਹਰ ਬੇਨਤੀ 'ਤੇ ਬਣਨ ਵਾਲੇ ਵੱਡੇ sitemaps ਦਾ ਵੀ timeout ਹੋ ਸਕਦਾ ਹੈ ਜਾਂ ਉਹ ਸਰਵਰ ਸੀਮਾਵਾਂ ਨਾਲ ਟਕਰਾ ਸਕਦੇ ਹਨ, ਜੋ 5xx ਸਥਿਤੀ ਵਜੋਂ ਦਿਸਦਾ ਹੈ। ਕਿਉਂਕਿ ਆਡਿਟ ਫਾਈਲ ਨੂੰ ਬ੍ਰਾਊਜ਼ਰ ਵਜੋਂ ਲਿਆਉਂਦਾ ਹੈ, ਇੱਥੇ ਨਾਕਾਮੀ ਦਾ ਮਤਲਬ ਆਮ ਤੌਰ 'ਤੇ ਇਹ ਹੈ ਕਿ ਕ੍ਰੌਲਰਾਂ ਨੂੰ ਵੀ ਇਨਕਾਰ ਮਿਲਦਾ ਹੈ।
ਇਸਨੂੰ ਕਿਵੇਂ ਠੀਕ ਕਰੀਏ
- ਰਿਪੋਰਟ ਵਿਚਲਾ sitemap URL ਖੋਲ੍ਹੋ ਅਤੇ ਸਥਿਤੀ ਨੋਟ ਕਰੋ। AISeeWhy ਰਿਪੋਰਟ ਸਬੂਤ ਅਤੇ ਪੇਸਟ ਕਰਨ ਲਈ ਤਿਆਰ ਹੱਲ ਦਿਖਾਉਂਦੀ ਹੈ; ਨਤੀਜੇ ਦੀ ਪੁਸ਼ਟੀ ਲਈ ਬਾਅਦ ਵਿੱਚ "ਦੁਬਾਰਾ ਜਾਂਚੋ" ਚਲਾਓ।
- ਆਪਣੇ CDN ਜਾਂ WAF ਵਿੱਚ sitemap paths (ਮਿਸਾਲ ਵਜੋਂ
/sitemap*.xml) ਨੂੰ ਚੈਲੰਜਾਂ, Bot Fight Mode ਅਤੇ rate limiting ਤੋਂ ਛੋਟ ਦਿਓ। - ਜੇ ਇਹ staging ਵਰਗੇ ਸੈੱਟਅੱਪ ਵਿੱਚ authentication ਪਿੱਛੇ ਹੈ, ਤਾਂ ਇਸਨੂੰ production ਹੋਸਟ 'ਤੇ ਜਨਤਕ ਬਣਾਓ।
- 5xx ਗਲਤੀਆਂ ਲਈ ਬਣੇ sitemap ਨੂੰ cache ਕਰੋ ਜਾਂ ਪਹਿਲਾਂ ਤੋਂ ਸਟੈਟਿਕ ਫਾਈਲ ਵਜੋਂ ਬਣਾਓ, ਅਤੇ ਬਹੁਤ ਵੱਡਿਆਂ ਨੂੰ sitemap index ਨਾਲ ਵੰਡੋ।
ਹੱਲ ਦੀ ਪੁਸ਼ਟੀ ਕਿਵੇਂ ਕਰਨੀ ਹੈ
ਬਦਲਾਅ ਤੋਂ ਬਾਅਦ, ਰਿਪੋਰਟ 'ਤੇ "ਦੁਬਾਰਾ ਜਾਂਚੋ" ਦਬਾਓ: ਇਹ ਦੱਸਦੀ ਹੈ ਕਿ ਕੀ ਠੀਕ ਹੋਇਆ ਅਤੇ ਸਕੋਰ ਕਿਵੇਂ ਬਦਲਿਆ।