Google Search Console में साइटमैप errors का क्या मतलब है और उन्हें कैसे ठीक करें?
Google Search Console में साइटमैप errors का मतलब है कि या तो Google फ़ाइल डाउनलोड ही नहीं कर पाया (Couldn't fetch, जो डिटेल पेज पर Sitemap could not be read के रूप में दिखता है) या उसने उसे डाउनलोड किया लेकिन उसका कुछ हिस्सा पार्स नहीं कर पाया (Has errors)। fetch की विफलता आमतौर पर गलत URL, robots.txt नियम, सर्वर error या Googlebot को जवाब देने वाले फ़ायरवॉल से होती है; पार्सिंग errors टूटे XML, गलत तारीखों, गलत URL या 50,000 URL या 50 MB से बड़ी फ़ाइलों से आती हैं। साइटमैप URL को बाहर से curl से टेस्ट करें, वजह ठीक करें, फिर दोबारा सबमिट करें।
Search Console की Sitemaps रिपोर्ट कम शब्दों में बात करती है: एक स्टेटस, एक संख्या और कभी-कभी error का नाम। हर स्टेटस के पीछे एक ख़ास विफलता होती है जिसे आप अपने टर्मिनल से एक मिनट में दोहरा सकते हैं। यह गाइड Google के दर्ज हर संदेश को उसकी वजह से जोड़ती है, उसे बाहर से टेस्ट करने का तरीका दिखाती है, और सुधार बताती है।
इस पेज पर
- Search Console में साइटमैप स्टेटस का क्या मतलब है?
- Search Console Couldn't fetch या Sitemap could not be read क्यों दिखाता है?
- साइटमैप को बाहर से कैसे टेस्ट करें?
- Has errors वाले संदेशों का क्या मतलब है और उन्हें कैसे ठीक करें?
- साइटमैप की साइज़ सीमाएं और फ़ॉर्मैट नियम क्या हैं?
- क्या AI क्रॉलर भी साइटमैप इस्तेमाल करते हैं?
Search Console में साइटमैप स्टेटस का क्या मतलब है?
आपके सबमिट किए हर साइटमैप को एक स्टेटस मिलता है, Google के उसे आख़िरी बार मांगने के आधार पर:
- Success: साइटमैप fetch हुआ और बिना errors के प्रोसेस हुआ, और उसके सभी URL क्रॉलिंग की कतार में हैं।
- Has errors (Sitemap had X errors के रूप में भी दिखता है): फ़ाइल fetch हुई, लेकिन उसके कुछ हिस्से पार्स नहीं हो सके। जो URL सही से पार्स हुए वे फिर भी कतार में हैं।
- Couldn't fetch: Google फ़ाइल ही नहीं ला सका। साइटमैप खोलने पर डिटेल पेज पर Sitemap could not be read लिखा होता है। फ़्रेंच Search Console में यही संदेश Impossible de lire le sitemap होता है, और ऊपर का स्टेटस Impossible de récupérer le sitemap होता है।
अगर fetch या पार्स विफल होता है, तो Google कुछ दिन कोशिश करता रहता है और फिर उस साइटमैप को मांगना बंद कर देता है, इसलिए टूटा साइटमैप अपने आप ठीक नहीं होता। दो और बातें कई उलझाने वाली रिपोर्ट समझाती हैं: रिपोर्ट सिर्फ़ रिपोर्ट या API से सबमिट किए गए साइटमैप दिखाती है, robots.txt में मिले साइटमैप नहीं, और सिर्फ़ मौजूदा प्रॉपर्टी के साइटमैप दिखाती है, इसलिए जांचें कि आप सही http या https और www या बिना www वाली प्रॉपर्टी में हैं।
Search Console Couldn't fetch या Sitemap could not be read क्यों दिखाता है?
Google fetch विफल होने की ये दर्ज वजहें बताता है:
- साइटमैप robots.txt से ब्लॉक है। साइटमैप fetch करते समय Google robots.txt मानता है, इसलिए
Disallow: /sitemapजैसा नियम उसे रोक देता है। - URL गलत है और 404 लौटाता है। अलग पाथ, छूटा हुआ
www, याhttpsकी जगहhttpआम गलतियां हैं। - सर्वर उपलब्ध न होने जैसी सामान्य error। इनमें से कुछ अस्थायी होती हैं।
- साइट पर कोई manual action है जो हल नहीं हुआ। उसके ठीक होने तक साइटमैप नहीं पढ़े जाते।
- साइटमैप के लिए क्रॉल की मांग कम है।
एक वजह जिसका Google अलग से नाम नहीं लेता, सामान्य या HTTP error के रूप में दिखती है: फ़ायरवॉल, CDN या बॉट सुरक्षा जो Googlebot को 403, 429 या चैलेंज पेज देती है जबकि आपके ब्राउज़र को फ़ाइल मिलती है। फ़ाइल के आगे लॉगिन की शर्त भी यही करती है। Google की तरफ़ से विफलता की पुष्टि के लिए साइटमैप URL को URL Inspection टूल में पेस्ट करें, लाइव टेस्ट चलाएं और देखें कि Crawl allowed में Yes और Page fetch में Successful है।
साइटमैप को बाहर से कैसे टेस्ट करें?
ये चार जांच किसी भी मशीन से चलाएं। example.com की जगह अपना डोमेन लिखें।
# 1. Status, redirects and content type
curl -sIL https://example.com/sitemap.xml | grep -iE '^(HTTP|location|content-type)'
# 2. The same file requested with Googlebot's user agent
curl -s -o /dev/null -w "%{http_code} %{content_type} %{size_download}\n" \
-A "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" \
https://example.com/sitemap.xml
# 3. Rules and Sitemap lines in robots.txt
curl -s https://example.com/robots.txt | grep -iE '^(user-agent|disallow|allow|sitemap)'
# 4. Well-formed XML and number of URLs
curl -s https://example.com/sitemap.xml -o sitemap.xml
xmllint --noout sitemap.xml && grep -o '<loc>' sitemap.xml | wc -l क्या देखें: आख़िरी स्टेटस 200 होना चाहिए। रीडायरेक्ट की कड़ी का मतलब है कि आपने ऐसा पता सबमिट किया जो आख़िरी पता नहीं है; Search Console आपका सबमिट किया सटीक URL दिखाता है और उसके रीडायरेक्ट फ़ॉलो नहीं करता, इसलिए आख़िरी URL सबमिट करें। HTML बॉडी के साथ text/html content type का मतलब है कि सर्वर ने फ़ाइल की जगह कोई पेज भेजा, अक्सर 404 पेज या होम पेज। अगर जांच 2 में 403, 429 या 503 आए जबकि जांच 1 में 200, तो कोई फ़ायरवॉल नियम क्रॉलर के साथ अलग बर्ताव कर रहा है। कुछ सर्वर HEAD अनुरोधों को GET से अलग जवाब देते हैं, इसीलिए जांच 2 सामान्य अनुरोध इस्तेमाल करती है।
आपका टेस्ट आपके अपने IP पते से आता है, इसलिए यह दिखाता है कि आपके नियम user agent के साथ कैसा बर्ताव करते हैं। IP रेंज पर आधारित नियम असली Googlebot के साथ फिर भी अलग बर्ताव कर सकते हैं। Google अपने क्रॉलर की IP रेंज प्रकाशित करता है और reverse DNS से पुष्टि का समर्थन करता है, ताकि अनुमति वाला नियम user agent स्ट्रिंग की बजाय असली क्रॉलर से मेल खाए।
Has errors वाले संदेशों का क्या मतलब है और उन्हें कैसे ठीक करें?
जब फ़ाइल fetch हो जाती है लेकिन पूरी तरह पार्स नहीं होती, तो डिटेल पेज error का नाम बताता है। जो आपको सबसे ज़्यादा दिख सकती हैं:
- Parsing error: XML पार्स नहीं हो सका, अक्सर URL में escape न किए गए किसी अक्षर की वजह से।
&को&लिखें, और',",<और>को भी escape करें। - Unsupported format: हेडर या namespace गलत है। साइटमैप XML डिक्लेरेशन से शुरू होना चाहिए और सीधे कोट्स के साथ
http://www.sitemaps.org/schemas/sitemap/0.9namespace इस्तेमाल करना चाहिए। - Invalid date:
lastmodमें W3C Datetime होना चाहिए, जैसे2026-11-17या2026-11-17T09:30:00+00:00। अगर आप समय देते हैं, तो टाइम ज़ोन भी दें। - URL not allowed: सूचीबद्ध URL साइटमैप के फ़ोल्डर से ऊपर हैं या किसी दूसरे डोमेन या प्रोटोकॉल पर हैं। Path mismatch यही समस्या
wwwके साथ है: साइटमैप और उसके URL एक जैसे होने चाहिए। - Too many URLs या Sitemap file size error: 50,000 से ज़्यादा URL या बिना कंप्रेशन 50 MB से ज़्यादा। फ़ाइल को बांटें और हिस्सों को साइटमैप इंडेक्स में सूचीबद्ध करें।
- Compression error: gzip फ़ाइल ख़राब है। उसे दोबारा कंप्रेस करें, अपलोड करें और दोबारा सबमिट करें।
- Empty sitemap: फ़ाइल में कोई URL नहीं है। उसे लिखने वाला जनरेटर जांचें।
- Leading whitespace: सिर्फ़ चेतावनी। XML डिक्लेरेशन से पहले की हर चीज़ हटाएं।
- URLs not followed या URLs not accessible: फ़ाइल ठीक है, लेकिन सूचीबद्ध URL बहुत बार रीडायरेक्ट होते हैं या क्रॉल नहीं हो सकते। सिर्फ़ आख़िरी, पूरे (absolute) URL सूचीबद्ध करें।
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://example.com/products?color=blue&size=m</loc>
<lastmod>2026-11-17</lastmod>
</url>
<url>
<loc>https://example.com/about</loc>
<lastmod>2026-11-10T09:30:00+00:00</lastmod>
</url>
</urlset> साइटमैप की साइज़ सीमाएं और फ़ॉर्मैट नियम क्या हैं?
sitemaps.org प्रोटोकॉल और Google का दस्तावेज़ एक ही सीमाएं तय करते हैं: हर साइटमैप फ़ाइल में 50,000 से ज़्यादा URL नहीं और बिना कंप्रेशन 50 MB से ज़्यादा नहीं। साइटमैप इंडेक्स 50,000 तक साइटमैप सूचीबद्ध कर सकता है और उसकी साइज़ सीमा भी वही है, और इंडेक्स के यह सीमा पार करने पर Google Too many sitemaps बताता है। इंडेक्स दूसरे इंडेक्स की ओर इशारा नहीं कर सकते। फ़ाइल UTF-8 एन्कोडेड होनी चाहिए, हर मान entity-escaped होना चाहिए, और Google पूरे, absolute URL मांगता है।
Google यह भी कहता है कि वह priority और changefreq को अनदेखा करता है, और lastmod तभी इस्तेमाल करता है जब वह लगातार और जांचने लायक रूप से सही हो, इसलिए इसे उस तारीख पर सेट करें जब कंटेंट आख़िरी बार सार्थक रूप से बदला। sitemaps.org प्रोटोकॉल के तहत https://example.com/blog/sitemap.xml पर रखा साइटमैप सिर्फ़ /blog/ के नीचे के URL सूचीबद्ध कर सकता है, इसीलिए Google साइटमैप को साइट के root पर रखने की सलाह देता है। बड़ी साइट अपने URL कई फ़ाइलों में बांटती है और एक इंडेक्स सबमिट करती है:
<?xml version="1.0" encoding="UTF-8"?>
<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<sitemap>
<loc>https://example.com/sitemap-pages.xml</loc>
<lastmod>2026-11-17</lastmod>
</sitemap>
<sitemap>
<loc>https://example.com/sitemap-blog.xml.gz</loc>
<lastmod>2026-11-15</lastmod>
</sitemap>
</sitemapindex> robots.txt में पूरे URL वाली एक लाइन भी जोड़ें, जैसे Sitemap: https://example.com/sitemap.xml। यह फ़ाइल में कहीं भी हो सकती है, और robots.txt पढ़ने वाला कोई भी क्रॉलर इससे आपका साइटमैप ढूंढ सकता है, सिर्फ़ वे नहीं जिन्हें आप सबमिट करते हैं।
क्या AI क्रॉलर भी साइटमैप इस्तेमाल करते हैं?
Google के लिए, अप्रत्यक्ष रूप से हां। साइटमैप Google को उसके Search इंडेक्स के लिए URL खोजने में मदद करते हैं, और Google कहता है कि उसके AI Overviews और AI Mode उसी इंडेक्स से लेते हैं: सहायक लिंक के रूप में दिखने के लिए पेज इंडेक्स होना चाहिए और स्निपेट के योग्य होना चाहिए। इसलिए इंडेक्सिंग धीमी करने वाली साइटमैप error, Google की AI सुविधाओं में पेज के दिखने में भी देरी कर सकती है।
दूसरे उत्तर इंजनों के लिए यह दर्ज नहीं है। OpenAI, Anthropic और Perplexity के क्रॉलर दस्तावेज़ यह नहीं बताते कि उनके क्रॉलर साइटमैप पढ़ते हैं या नहीं, इसलिए ChatGPT, Claude या Perplexity में पेज लाने के लिए साइटमैप पर भरोसा न करें। वहां इंटरनल लिंक और खुली robots.txt व फ़ायरवॉल ज़्यादा मायने रखते हैं। काम करता साइटमैप और robots.txt में Sitemap: लाइन रखने में कोई ख़र्च नहीं है, और यह उन्हें इस्तेमाल करने वाले हर क्रॉलर के काम आता है।
AISeeWhy की पूरी रिपोर्ट robots.txt में घोषित या /sitemap.xml पर मिले साइटमैप पढ़ती है और ऐसे साइटमैप को चिह्नित करती है जिसे fetch या पार्स नहीं किया जा सकता, हर मामले के लिए सुधार गाइड के साथ: साइटमैप तक पहुंच नहीं और साइटमैप पढ़ा नहीं जा सकता।
इस समस्या के सुधार
- llms.txt में टूटे लिंक: 2
- कोई साइटमैप नहीं मिला
- Sitemap प्राप्त नहीं किया जा सकता (स्टेटस 403)
- Sitemap पढ़ा नहीं जा सकता
अगले कदम
- AI क्रॉलर के लिए robots.txt टेस्टर और चेकर
- AI क्रॉलर IP जाँच
- पूरी रिपोर्ट का एक उदाहरण देखें
- AI क्रॉलर मॉनिटरिंग
- प्लान और कीमतें
इस लेख के क्रॉलर
अक्सर पूछे जाने वाले प्रश्न
Impossible de lire le sitemap का क्या मतलब है?
यह Sitemap could not be read का फ़्रेंच Search Console टेक्स्ट है। यह डिटेल पेज पर तब दिखता है जब Google फ़ाइल fetch ही नहीं कर पाया। URL, robots.txt, सर्वर का स्टेटस कोड और अपना फ़ायरवॉल जांचें, वजह ठीक करें और दोबारा सबमिट करें।
सुधार के कितने समय बाद Google मेरा साइटमैप दोबारा पढ़ेगा?
Google कहता है कि वह साइटमैप सबमिट होते ही उसे क्रॉल करने की कोशिश करता है, इसलिए सुधार के बाद दोबारा सबमिट करें। सफल पढ़ने के बाद वह साइटमैप को अपने समय पर दोबारा क्रॉल करता है, बाकी साइट से अलग।
मेरा साइटमैप Sitemaps रिपोर्ट में क्यों नहीं दिखता?
रिपोर्ट सिर्फ़ रिपोर्ट या API से सबमिट किए गए साइटमैप दिखाती है, और सिर्फ़ मौजूदा प्रॉपर्टी के। robots.txt से मिला साइटमैप Google वहां दिखाए बिना इस्तेमाल कर सकता है। उसका स्टेटस देखने के लिए उसे सबमिट करें।
क्या साइटमैप error से मेरे पेज Google से हट जाते हैं?
अपने आप नहीं। Google कहता है कि पहले के सफल पढ़ने से उसने जो सीखा वह याद रखता है, और बाद की विफलता से वह भूलता नहीं। साइटमैप फिर से काम करने तक नए और बदले पेज धीरे मिल सकते हैं।
क्या साइटमैप हटाकर दोबारा सबमिट करने से error हट जाएगी?
सिर्फ़ तब जब वजह ठीक हो गई हो। रिपोर्ट से साइटमैप हटाने से Google उसे या उसके URL को नहीं भूलता, और दोबारा सबमिट किया साइटमैप अगर फिर विफल हो तो उसे वही error मिलती है।
स्रोत
- Google Search Console Help: Sitemaps report
- Google Search Console Help: Rapport sur les sitemaps (फ़्रेंच)
- Google Search Central: Build and submit a sitemap
- Sitemaps.org: Sitemaps XML format
- Google: Verify requests from Google crawlers and fetchers
- Google: Google's common crawlers
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity: Perplexity crawlers