XML-карта сайта (sitemap.xml)
XML-список адресов, которые сайт хочет видеть в индексе. Он не поднимает позиции — он делает так, чтобы краулер вообще узнал о существовании страниц.
XML-карта сайта — список адресов, о которых вы хотите сообщить поисковикам, при желании с датой последнего изменения каждого. Позиции она не поднимает и ничего насильно в индекс не добавляет. Её задача — чтобы краулер нашёл все страницы, включая те, на которые мало внутренних ссылок, и быстрее замечал новые и обновлённые.
Как SiteScan находит и читает её
Сначала сканер смотрит строки Sitemap: в robots.txt, затем /sitemap.xml и /sitemap_index.xml и читает первую ответившую карту (сжатые .xml.gz тоже).
- Зелёный — сколько URL в ней перечислено. Очень большие файлы читаются до 16 МБ, и тогда число заканчивается на «+».
- Красный, «Невалидный XML»: файл найден, но это не корректная карта сайта. Поисковики отвергают её целиком.
- Жёлтый, «Отсутствует»: ни один адрес не вернул карту.
Как сделать правильно
- Пусть карту генерирует CMS: у WordPress встроенная на
/wp-sitemap.xml, SEO-плагины добавляют свою. - Включайте только канонические индексируемые URL с ответом 200: без редиректов, страниц с
noindexи дублей. - Объявите её в robots.txt строкой
Sitemap: https://example.com/sitemap.xmlи добавьте в Google Search Console и Яндекс Вебмастер.
Подробнее — про robots.txt и карты сайта. Строки ниже — о датах lastmod и о том, отвечают ли адреса из карты.
Проверьте этот пункт на своём сайте
Запустите бесплатное сканирование: в отчёте будет эта строка для вашего домена вместе с остальными проверками аудита.
Ещё в разделе «Индексация»
Что проверяет SiteScan
TLS-сертификат
- Срок действия SSL/TLS-сертификата
- Устаревшие версии TLS (1.0 и 1.1)
- Цепочка сертификатов TLS
- Издатель TLS-сертификата
- Алгоритм подписи сертификата
Регистрация домена
- Срок регистрации домена
- Зарегистрированное доменное имя
- Регистратор домена
- Дата регистрации домена
- Дата последнего изменения домена
- Статусы домена в реестре (EPP)
- Запрет на перенос домена
- Abuse-контакт регистратора
- Источник данных RDAP и WHOIS
Индексация
- Файл robots.txt
- CSS и JS, закрытые в robots.txt
- XML-карта сайта (sitemap.xml)
- Индекс карт сайта
- Чужие URL в карте сайта
- Даты lastmod в карте сайта
- Битые URL в карте сайта
- RSS- и Atom-лента
Адреса и редиректы
- Редирект с HTTP на HTTPS
- Редирект с www и без www
- Длина цепочки редиректов
- Обработка ошибки 404 и мягкий 404
Заголовки безопасности
- HTTP-заголовки безопасности и оценка
- Заголовок Strict-Transport-Security (HSTS)
- Заголовок Content-Security-Policy (CSP)
- X-Content-Type-Options: nosniff
- X-Frame-Options и защита от кликджекинга
- Заголовок Referrer-Policy
- Заголовок Permissions-Policy
- Список HSTS preload
- CORS и чтение с других origin
- HTTP-метод TRACE
Отдача и репутация
- Заголовок Cache-Control для HTML
- Ревалидация через ETag и Last-Modified
- Поддержка HTTP/3 и QUIC
- Версии ПО в заголовках сервера
- Проверка по DNS-блоклистам (DNSBL)
Внутренние ссылки
Открытые файлы
- Открытые файлы .env, .git и бэкапы
- Листинг директорий на сервере
- Публичные source maps JavaScript
- Открытые точки входа WordPress
Служебные файлы
- Файл security.txt
- Файл llms.txt для ИИ-ассистентов
- Файл llms-full.txt
- Файл ads.txt для рекламы
- Файл humans.txt
- Адрес /.well-known/change-password
DNS и почта
- MX-записи (почтовые серверы)
- Запись SPF
- Запись и политика DMARC
- Подпись зоны DNSSEC
- Запись CAA
- Резервирование DNS-серверов
- Поддержка IPv6 (AAAA-запись)
- Политика MTA-STS
- Запись TLS-RPT для отчётов
- Запись BIMI (логотип в почте)
- Wildcard-запись в DNS
- Висячий CNAME и захват поддомена
Приватность и согласие
- Счётчики аналитики и трекеры
- Баннер согласия на cookie
- Политика конфиденциальности
- Пользовательское соглашение
- Выходные данные (Impressum)
- Заявление о доступности
Core Web Vitals
- Оценка производительности Lighthouse
- Largest Contentful Paint (LCP)
- Cumulative Layout Shift (CLS)
- Interaction to Next Paint (INP)
- Полевые данные CrUX и лабораторные замеры