Карта сайта sitemap.xml

Sitemap.xml — XML-файл с перечнем всех индексируемых страниц сайта, который владелец передаёт поисковым роботам для ускорения обхода. Карта сайта sitemap.xml особенно важна для крупных проектов, новых сайтов без накопленных входящих ссылок и сайтов со сложной структурой, где часть страниц не получает достаточно внутренних ссылок куда роботы добираются по обычной цепочке ссылок. Корректно настроенный sitemap.xml ускоряет индексацию новых материалов с 5–14 дней до 1–3 дней и помогает правильно распределить краулинговый бюджет.

Что такое sitemap.xml

Sitemap.xml — структурированный список URL сайта в формате XML, который владелец передаёт поисковым системам как путевой лист по содержимому. В отличие от HTML-карты сайта (или HTML-карта сайта — синоним) HTML-карты сайта для пользователя; sitemap.xml не рассчитан на чтение людьми — это служебный файл для роботов Google, Яндекс, Bing.

Карта сайта для SEO — обязательный элемент технической инфраструктуры. Sitemap.xml — это текстовый XML-файл по адресу https://site.by/sitemap.xml, содержащий полный или приоритетный список индексируемых URL сайта. Каждая запись в файле — отдельный URL с опциональными метаданными: дата последнего обновления (lastmod), частота изменения (changefreq), приоритет (priority).

Стандарт sitemap.xml разработан в 2005 году компанией Google и одобрен Яндексом, Bing, Yahoo. Спецификация открытая, опубликована на sitemaps.org. это самый распространённый формат передачи структуры сайта в поисковые системы.

Sitemap.xml — это рекомендация роботу, не команда. Робот может обойти сайт без sitemap и проиндексировать страницы, не упомянутые в карте. Но с sitemap процесс идёт быстрее и предсказуемее.

Зачем нужна карта сайта

Sitemap.xml решает несколько задач технического SEO:

• Ускорение индексации новых страниц. Робот узнаёт о новой странице из sitemap значительно быстрее, чем при обнаружении через внутренние ссылки. Для активного блога или интернет-магазина с регулярным добавлением товаров — критично.
• Индексация изолированных страниц. Страницы без входящих ссылок (которые не попадают в основную навигацию или не упоминаются в других материалах) роботы могут не найти. Sitemap гарантирует, что они хотя бы окажутся в очереди на обход.
• Распределение краулингового бюджета. Для крупных проектов с десятками тысяч URL sitemap помогает направить роботов на приоритетные страницы — те, что попали в карту.
• Сигнал об обновлениях. Поле lastmod сигнализирует роботу о том, что страница изменилась. Это ускоряет переобход страницы раньше, чем при обычном цикле переобхода.
• Передача расширенных данных. Через специализированные sitemap (sitemap для изображений, видео, новостей) передаётся дополнительная информация, недоступная через обычное сканирование.

Когда sitemap особенно важен: для новых сайтов без накопленного ссылочного веса (первые 6–12 месяцев), для крупных каталогов от 10 000 URL, для сайтов со сложной структурой (множество подразделов, каталогов фильтров, мультимедиа). Для малых сайтов до 50–100 страниц sitemap полезен, но не обязателен — роботы обойдут такой сайт и без него.

Структура файла sitemap.xml

Минимальный sitemap.xml выглядит так:

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
  <url>
    <loc>https://site.by/</loc>
    <lastmod>2024-01-15</lastmod>
  </url>
  <url>
    <loc>https://site.by/uslugi/</loc>
    <lastmod>2024-01-10</lastmod>
  </url>
</urlset>

Обязательные элементы:

• <?xml version="1.0" encoding="UTF-8"?> — декларация XML с указанием кодировки. Только UTF-8.
• <urlset> — корневой контейнер с пространством имён xmlns="http://www.sitemaps.org/schemas/sitemap/0.9".
• <url> — запись для каждой страницы. Минимум один тег <loc> с полным URL.

Опциональные элементы внутри <url>:

Google игнорирует changefreq и priority, опираясь только на lastmod. Яндекс учитывает все три тега, но lastmod остаётся самым важным сигналом. Поэтому современный подход — корректный lastmod на каждой странице и опционально priority, без changefreq.

Как создать sitemap.xml

Sitemap.xml создаётся одним из трёх способов в зависимости от типа сайта.

Способ 1. Автоматическая генерация через CMS. Самый распространённый и удобный вариант. SEO-плагины и встроенные модули создают и обновляют sitemap автоматически при каждом изменении сайта.

• WordPress. Плагины Yoast SEO, Rank Math, All in One SEO — каждый генерирует sitemap, обычно по адресу /sitemap_index.xml или /sitemap.xml. Доступ к настройкам через админ-панель.
• 1С-Битрикс. Модуль «Поисковая оптимизация → Карта сайта». Генерирует sitemap по расписанию или вручную. Настройка глубины обхода, исключений по паттернам URL.
• OpenCart, MODX, Joomla. Встроенные модули или официальные расширения для генерации sitemap. Базовая настройка через админку.
• Tilda, Wix, Webflow. Sitemap создаётся автоматически без участия владельца. Доступен по стандартному адресу /sitemap.xml.

Способ 2. Онлайн-генераторы. Для сайтов на самописных движках или нестандартных платформах. Сервисы XML-Sitemaps.com, Slickplan, Octopus.do сканируют сайт по URL и генерируют sitemap.xml для скачивания. Бесплатные версии — до 500 URL, платные — без ограничений. Минус — sitemap не обновляется автоматически, нужно перегенерировать при каждом существенном изменении сайта.

Способ 3. Ручное создание или скрипт. Для нестандартных задач (специализированные sitemap для отдельных типов контента, кастомные шаблоны). Sitemap создаётся в текстовом редакторе или через скрипт, который выгружает URL из базы данных. Подходит только разработчикам.

Как настроить sitemap.xml

После создания файла обязательный шаг — валидация: проверка корректности через инструменты Search Console и Яндекс.Вебмастера.

Настройка sitemap.xml — три обязательных шага после создания файла.

Шаг 1. Указание sitemap в robots.txt. В конце файла robots.txt добавляется директива:

Sitemap: https://site.by/sitemap.xml

Если карт сайта несколько, указываются все. Это базовый способ сообщить роботам о существовании файла.

Шаг 2. Передача в Яндекс.Вебмастер. Раздел «Индексирование → Файлы Sitemap». Кнопка «Добавить файл Sitemap», ввод URL. После добавления Яндекс начинает обходить URL из sitemap и показывает статистику: сколько страниц обнаружено, сколько проиндексировано, сколько с ошибками.

Шаг 3. Передача в Google Search Console. Раздел «Sitemaps» (в новой версии — «Индексирование → Sitemaps»). Поле «Добавить новый файл Sitemap», ввод пути от корня (например, sitemap.xml). Google показывает статус обработки и количество проиндексированных URL.

Дополнительные рекомендации:

• Sitemap включает только индексируемые URL. Страницы с noindex, заблокированные в robots.txt, страницы, перенаправляющие на каноническую через canonical — в карту не попадают. Конфликтные сигналы снижают доверие к sitemap в целом.
• Все URL в sitemap отдают код 200. Страницы с 301-редиректом, 404, 500 — исключаются из карты. Регулярная проверка через Screaming Frog.
• Lastmod отражает реальные обновления. Поддельная дата (везде «вчера») игнорируется и снижает доверие к карте.
• Файл доступен по стабильному URL. Менять адрес sitemap нежелательно — после смены нужно повторно передавать его в Search Console и Яндекс.Вебмастер.

Расширенные типы sitemap

Помимо стандартного формата существуют специализированные sitemap для разных типов медиа: image-sitemap для изображений, video-sitemap для видео, news-sitemap для новостей.

Помимо стандартного sitemap.xml существуют специализированные карты для отдельных типов контента.

Индекс-файл sitemap (sitemap index)

Для крупных сайтов от 50 000 URL — один файл sitemap.xml превышает лимиты (50 000 URL или 50 МБ). Решение — разбить на несколько файлов и создать индекс-файл, который ссылается на все остальные:

<?xml version="1.0" encoding="UTF-8"?>
<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
  <sitemap>
    <loc>https://site.by/sitemap-products.xml</loc>
    <lastmod>2024-01-15</lastmod>
  </sitemap>
  <sitemap>
    <loc>https://site.by/sitemap-articles.xml</loc>
    <lastmod>2024-01-14</lastmod>
  </sitemap>
</sitemapindex>

В robots.txt и Search Console указывается только индекс-файл, остальные карты обнаруживаются автоматически.

Sitemap для изображений. Передаёт информацию об изображениях, размещённых на сайте. Полезен для интернет-магазинов с большими каталогами товаров и сайтов с фотогалереями. Использует пространство имён xmlns:image и теги <image:image>, <image:loc>, <image:caption> внутри стандартных <url>.

Sitemap для видео. Для сайтов с собственным видеоконтентом. Передаёт URL страницы, ссылку на видеофайл или плеер, продолжительность, описание, миниатюру. Помогает попадать в специализированные видеосниппеты Google.

Sitemap для новостей. Только для зарегистрированных в Google News сайтов. Содержит статьи, опубликованные за последние 48 часов. Используется для быстрого попадания в Top Stories и новостные карусели Google.

Sitemap с hreflang. Для мультиязычных и мультирегиональных сайтов. Через теги <xhtml:link rel="alternate" hreflang="..."> внутри <url> передаются связи между языковыми версиями страниц. Альтернатива указанию hreflang в HTML или HTTP-заголовках.

Типичные ошибки

Часто задаваемые вопросы

Обязателен ли sitemap.xml для сайта?

Не обязателен, но рекомендуется. Без sitemap роботы найдут страницы через внутренние ссылки и внешние упоминания, но это медленнее. Для сайтов 50–100 страниц и для активных проектов с регулярными обновлениями — sitemap заметно ускоряет индексацию.

Как часто обновляется sitemap.xml?

При автоматической генерации через CMS — при каждом изменении сайта (добавление страницы, обновление контента). На ручных или сгенерированных через онлайн-сервисы — нужно обновлять вручную при существенных изменениях, минимум раз в месяц для активных проектов.

Что такое sitemap.xml.gz и зачем сжимать?

Sitemap.xml.gz — сжатая версия файла через алгоритм gzip. Используется для крупных карт сайта (от нескольких МБ) для ускорения передачи роботам. Поддерживается всеми поисковыми системами. Для большинства проектов не нужно: размер обычного sitemap редко превышает 1–5 МБ.

Можно ли иметь несколько sitemap для одного сайта?

Да. Через индекс-файл sitemap можно объединить десятки отдельных карт: для товаров, для статей, для категорий, для изображений. В robots.txt и Search Console указывается только индекс, остальные обнаруживаются через него.

Что важнее: lastmod или priority?

Lastmod. Google полностью игнорирует priority с 2017 года. Яндекс учитывает priority как мягкую подсказку, но lastmod имеет значительно больший вес. Практический подход — корректный lastmod на каждой странице, priority опциональный.

Можно ли отправлять sitemap для нового сайта без накопленного веса?

Можно и нужно. Для нового сайта sitemap — основной инструмент ускорения первичной индексации. Через 2–4 недели после регистрации в Search Console и Яндекс.Вебмастере типичный новый сайт получает базовую индексацию ключевых разделов именно через sitemap.

Что делать, если в Search Console показано «Обнаружено меньше URL, чем в sitemap»?

Это нормально для крупных сайтов в первые недели после добавления. Google и Яндекс не обязаны проиндексировать все URL из sitemap сразу. Если ситуация не меняется через 2–3 месяца — анализ причин: дубли, низкое качество страниц, проблемы с краулинговым бюджетом.

Влияет ли sitemap.xml на ранжирование?

Прямо — нет, это не фактор ранжирования. Косвенно — да: быстрая индексация новых страниц через sitemap означает быстрое начало накопления поведенческих сигналов и ссылок, что отражается на позициях.

Нужны ли отдельные sitemap для Яндекса и Google?

Нет, один файл подходит обеим системам. Стандарт sitemap единый, расширения (sitemap для изображений, видео, hreflang) тоже распознаются обоими поисковиками. Отдельные карты создаются по типам контента, не по системам.