Что значат ошибки sitemap в Google Search Console и как их исправить?
Ошибки sitemap в Google Search Console означают либо что Google вообще не смог скачать файл (Couldn't fetch, а на странице подробностей — Sitemap could not be read), либо что скачал, но не смог разобрать его часть (Has errors). Сбои загрузки обычно вызваны неверным URL, правилом robots.txt, ошибкой сервера или файрволом, который отвечает Googlebot; ошибки разбора — сломанным XML, неверными датами, неправильными URL или файлами больше 50 000 URL или 50 МБ. Проверьте URL sitemap снаружи с помощью curl, устраните причину и отправьте файл заново.
Отчёт о файлах Sitemap в Search Console немногословен: статус, число и иногда название ошибки. За каждым статусом стоит конкретный сбой, который можно воспроизвести в своём терминале за минуту. Это руководство сопоставляет каждое сообщение, описанное Google, с его причиной, показывает, как проверить его снаружи, и приводит исправление.
На этой странице
Что значат статусы sitemap в Search Console?
Каждый отправленный файл sitemap получает один статус — по последнему запросу Google:
- Success: файл sitemap загружен и обработан без ошибок, и все его URL поставлены в очередь на сканирование.
- Has errors (также отображается как Sitemap had X errors): файл загружен, но его части не удалось разобрать. URL, которые разобраны правильно, всё равно поставлены в очередь.
- Couldn't fetch: Google не смог получить сам файл. Если открыть sitemap, на странице подробностей написано Sitemap could not be read. Во французском интерфейсе Search Console то же сообщение звучит как Impossible de lire le sitemap, а статус верхнего уровня — Impossible de récupérer le sitemap.
Если загрузка или разбор не удались, Google несколько дней пытается снова, а затем перестаёт запрашивать этот sitemap, так что сломанный sitemap сам не исправится. Ещё две детали объясняют многие непонятные отчёты: отчёт показывает только файлы sitemap, отправленные через отчёт или API, а не найденные в robots.txt, и только для текущего ресурса, поэтому проверьте, что вы в нужном ресурсе: http или https, с www или без.
Почему Search Console пишет Couldn't fetch или Sitemap could not be read?
Google называет такие задокументированные причины сбоя загрузки:
- Sitemap заблокирован в robots.txt. Google соблюдает robots.txt при загрузке файлов sitemap, так что правило вроде
Disallow: /sitemapего останавливает. - URL неверный и возвращает 404. Обычные ошибки — другой путь, пропущенный
wwwилиhttpвместоhttps. - Общая ошибка, например недоступность сервера. Некоторые из них временные.
- На сайт наложены неустранённые меры, принятые вручную. Файлы sitemap не читаются, пока это не исправлено.
- Низкий спрос на сканирование sitemap.
Одна причина, которую Google не называет отдельно, проявляется как общая ошибка или ошибка HTTP: файрвол, CDN или защита от ботов, которые отвечают Googlebot кодом 403, 429 или страницей-проверкой, пока ваш браузер получает файл. Требование входа перед файлом приводит к тому же. Чтобы подтвердить сбой со стороны Google, вставьте URL sitemap в инструмент проверки URL, запустите проверку в реальном времени и убедитесь, что сканирование разрешено, а загрузка страницы прошла успешно.
Как проверить sitemap снаружи?
Выполните эти четыре проверки с любого компьютера. Замените example.com своим доменом.
# 1. Status, redirects and content type
curl -sIL https://example.com/sitemap.xml | grep -iE '^(HTTP|location|content-type)'
# 2. The same file requested with Googlebot's user agent
curl -s -o /dev/null -w "%{http_code} %{content_type} %{size_download}\n" \
-A "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" \
https://example.com/sitemap.xml
# 3. Rules and Sitemap lines in robots.txt
curl -s https://example.com/robots.txt | grep -iE '^(user-agent|disallow|allow|sitemap)'
# 4. Well-formed XML and number of URLs
curl -s https://example.com/sitemap.xml -o sitemap.xml
xmllint --noout sitemap.xml && grep -o '<loc>' sitemap.xml | wc -l На что смотреть: итоговый статус должен быть 200. Цепочка перенаправлений означает, что вы отправили не конечный адрес; Search Console показывает именно тот URL, который вы отправили, и не следует для него перенаправлениям, поэтому отправляйте конечный URL. Тип контента text/html вместе с HTML в теле ответа означает, что сервер прислал страницу, часто страницу 404 или главную, а не файл. Если проверка 2 возвращает 403, 429 или 503, а проверка 1 — 200, правило файрвола обрабатывает краулеров иначе. Некоторые серверы отвечают на запросы HEAD не так, как на GET, поэтому проверка 2 использует обычный запрос.
Ваш тест идёт с вашего IP-адреса, поэтому показывает, как ваши правила обрабатывают user agent. Правила на основе диапазонов IP всё равно могут обрабатывать настоящий Googlebot иначе. Google публикует диапазоны IP своих краулеров и поддерживает проверку через обратный DNS, так что разрешающее правило может совпадать с настоящим краулером, а не со строкой user agent.
Что значат сообщения Has errors и как их исправить?
Когда файл загружен, но не может быть разобран полностью, на странице подробностей указана ошибка. Чаще всего встречаются такие:
- Parsing error: XML не удалось разобрать, часто из-за неэкранированного символа в URL. Пишите
&как&и экранируйте также',",<и>. - Unsupported format: неверный заголовок или пространство имён. Sitemap должен начинаться с объявления XML и использовать пространство имён
http://www.sitemaps.org/schemas/sitemap/0.9с прямыми кавычками. - Invalid date:
lastmodдолжен использовать W3C Datetime, например2026-11-17или2026-11-17T09:30:00+00:00. Если указываете время, указывайте и часовой пояс. - URL not allowed: перечисленные URL находятся выше папки sitemap или на другом домене или протоколе. Path mismatch — та же проблема с
www: sitemap и его URL должны совпадать. - Too many URLs или Sitemap file size error: больше 50 000 URL или больше 50 МБ без сжатия. Разделите файл и перечислите части в индексном файле sitemap.
- Compression error: файл gzip повреждён. Сожмите его заново, загрузите и отправьте повторно.
- Empty sitemap: в файле нет URL. Проверьте генератор, который его пишет.
- Leading whitespace: лишь предупреждение. Удалите всё, что стоит перед объявлением XML.
- URLs not followed или URLs not accessible: с файлом всё в порядке, но перечисленные URL слишком часто перенаправляют или не могут быть просканированы. Указывайте только конечные абсолютные URL.
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<url>
<loc>https://example.com/products?color=blue&size=m</loc>
<lastmod>2026-11-17</lastmod>
</url>
<url>
<loc>https://example.com/about</loc>
<lastmod>2026-11-10T09:30:00+00:00</lastmod>
</url>
</urlset> Какие ограничения размера и правила формата у sitemap?
Протокол sitemaps.org и документация Google задают одинаковые ограничения: не больше 50 000 URL и не больше 50 МБ без сжатия на один файл sitemap. Индексный файл может перечислять до 50 000 файлов sitemap и имеет тот же лимит размера, а при его превышении Google сообщает Too many sitemaps. Индексные файлы не могут ссылаться на другие индексные файлы. Файл должен быть в кодировке UTF-8, все значения должны быть экранированы, а Google просит указывать полные абсолютные URL.
Google также сообщает, что игнорирует priority и changefreq и использует lastmod, только если он стабильно и проверяемо точен, так что ставьте дату последнего существенного изменения контента. По протоколу sitemaps.org sitemap по адресу https://example.com/blog/sitemap.xml может перечислять только URL внутри /blog/, поэтому Google рекомендует размещать файлы sitemap в корне сайта. Большой сайт делит свои URL на несколько файлов и отправляет один индексный файл:
<?xml version="1.0" encoding="UTF-8"?>
<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
<sitemap>
<loc>https://example.com/sitemap-pages.xml</loc>
<lastmod>2026-11-17</lastmod>
</sitemap>
<sitemap>
<loc>https://example.com/sitemap-blog.xml.gz</loc>
<lastmod>2026-11-15</lastmod>
</sitemap>
</sitemapindex> Добавьте также в robots.txt одну строку с полным URL, например Sitemap: https://example.com/sitemap.xml. Она может стоять в любом месте файла, и по ней ваш sitemap найдёт любой краулер, читающий robots.txt, а не только те, кому вы его отправили.
Используют ли sitemap AI-краулеры?
Для Google — косвенно да. Файлы sitemap помогают Google находить URL для поискового индекса, а Google сообщает, что AI Overviews и AI Mode опираются на этот индекс: чтобы появиться как ссылка-подтверждение, страница должна быть проиндексирована и пригодна для сниппета. Поэтому ошибка sitemap, замедляющая индексацию, может задержать и появление страницы в AI-функциях Google.
Для других ответных систем это не задокументировано. Документация краулеров OpenAI, Anthropic и Perplexity не говорит, читают ли их краулеры sitemap, так что не рассчитывайте, что sitemap приведёт страницу в ChatGPT, Claude или Perplexity. Там важнее внутренние ссылки и открытые robots.txt и файрвол. Рабочий sitemap и строка Sitemap: в robots.txt ничего не стоят и пригодятся любому краулеру, который их использует.
Полный отчёт AISeeWhy читает файлы sitemap, объявленные в robots.txt или найденные по адресу /sitemap.xml, и отмечает sitemap, который не удаётся загрузить или разобрать, с руководством по исправлению для каждого случая: sitemap недоступен и sitemap не читается.
Исправления для этой проблемы
- Битые ссылки в llms.txt: 2
- Карта сайта не найдена
- Sitemap не удаётся получить (статус 403)
- Sitemap не читается
Что дальше
- Тестер и проверка robots.txt для AI-краулеров
- Проверка IP AI-краулеров
- Посмотреть пример полного отчёта
- Мониторинг AI-краулеров
- Тарифы и цены
Краулеры в этой статье
Частые вопросы
Что значит Impossible de lire le sitemap?
Это текст французского интерфейса Search Console для Sitemap could not be read. Он появляется на странице подробностей, когда Google вообще не смог загрузить файл. Проверьте URL, robots.txt, код статуса сервера и файрвол, устраните причину и отправьте файл заново.
Через сколько после исправления Google перечитает мой sitemap?
Google сообщает, что старается просканировать sitemap сразу после отправки, так что после исправления отправьте его заново. После успешного чтения Google повторно сканирует sitemap по своему графику, независимо от остального сайта.
Почему моего sitemap нет в отчёте о файлах Sitemap?
Отчёт показывает только файлы sitemap, отправленные через отчёт или API, и только для текущего ресурса. Sitemap, найденный через robots.txt, Google может использовать, и при этом он там не появится. Отправьте его, чтобы увидеть статус.
Удаляет ли ошибка sitemap мои страницы из Google?
Сама по себе нет. Google сообщает, что помнит то, что узнал при прошлых успешных чтениях, и последующий сбой не заставляет его это забыть. Новые и изменённые страницы могут находиться медленнее, пока sitemap снова не заработает.
Уберёт ли ошибку удаление и повторная отправка sitemap?
Только если причина устранена. Удаление sitemap из отчёта не заставляет Google забыть его или его URL, а повторно отправленный sitemap, который по-прежнему не работает, получит ту же ошибку.
Источники
- Google Search Console Help: Sitemaps report
- Google Search Console Help: Rapport sur les sitemaps (на французском)
- Google Search Central: Build and submit a sitemap
- Sitemaps.org: Sitemaps XML format
- Google: Verify requests from Google crawlers and fetchers
- Google: Google's common crawlers
- Google Search Central: AI features and your website
- OpenAI: Overview of OpenAI crawlers
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Perplexity: Perplexity crawlers