XML Sitemap остаётся полезным: что подтвердил Google и почему llms.txt его не заменяет

Что случилось

Google Search Relations подтвердили практическую пользу XML Sitemap.

В файл следует включать канонические URL и указывать достоверный lastmod; priority и changefreq Google не поддерживает.

Как это работает

XML Sitemap сообщает поисковой системе, какие канонические URL сайт считает важными и когда они существенно изменились.

Файл помогает обнаружению и планированию обхода, особенно когда страниц много или внутренние ссылки не сразу приводят к новому URL.

Google не использует priority и changefreq, а недостоверный lastmod может игнорировать.

RSS полезен для недавних обновлений, но охватывает только часть материалов.

HTML-карта помогает людям и связям, а llms.txt не заменяет протокол Sitemap.

Что это меняет для сайта

Sitemap помогает обнаруживать и планировать обход URL, но не гарантирует индексацию.

RSS, HTML-карта и llms.txt не заменяют XML Sitemap.

• Кого касается: Все сайты, особенно крупные, новостные, динамические и интернет-магазины
• Насколько срочно: Высокий для технического SEO

Что проверить сегодня

Оставьте в Sitemap только канонические индексируемые URL, меняйте lastmod после существенного обновления и проверяйте доступность файла в Search Console.

Как применить это в работе

Оставьте в Sitemap только URL с ответом 200, разрешённые к индексации и совпадающие с canonical.

Уберите редиректы, 404, параметры и дубли.

Разделяйте большие наборы на файлы и объединяйте их индексом Sitemap.

Меняйте lastmod только после существенного обновления основного содержания, а не при каждом билде.

Отправьте файл в Search Console и укажите его в robots.txt; доступ к нему должен быть открыт без cookie, авторизации и блокировки WAF.

Как проверить эффект

Проверяйте HTTP-ответ, валидность XML, количество отправленных и известных Google URL, а затем сопоставляйте с Page Indexing и серверными логами.

Статус Could not fetch не всегда означает сломанный XML — причиной могут быть временные ограничения доступа или обхода.

Sitemap не гарантирует индексацию.

Успех — поисковик стабильно получает файл, важные URL обнаруживаются и их lastmod соответствует реальным изменениям.

Проблемы качества страницы решаются отдельно.