При проверке базы индексации sitemap (карта сайта — список страниц, предназначенный для поисковых систем) и структура разделов — это не две независимые вещи. Sitemap перечисляет страницы, которые вы хотите сделать доступными для обнаружения, а структура разделов определяет, как эти страницы связаны внутри сайта и через какие точки входа к ним можно попасть. Если они не совпадают, типичные проявления таковы: в карте есть страницы, но в навигации и разделах нет входа к ним; или в разделах есть контент, но в карте нет соответствующего адреса. Ниже объясняется, как обеспечить их взаимодействие, в порядке реальной проверки.
Сначала проведите инвентаризацию структуры разделов, затем решайте, что включать в карту
Не открывайте инструмент генерации карты сразу. Первый шаг — перечислить текущие уровни разделов: какие есть разделы первого уровня, какие подразделы входят в каждый из них, какие разделы являются лишь навигационными группами и не имеют собственных страниц. Смысл этого шага — различить два типа адресов: страницы разделов и страницы контента, которые действительно несут контент, и группы, используемые только для организации навигации.
После инвентаризации отметьте каждый раздел:
- Разделы с отдельными страницами и постоянным обновлением контента должны быть включены в карту;
- Разделы, выполняющие только функцию группировки и не имеющие реальных страниц, не должны попадать в карту;
- Адреса, автоматически генерируемые системой, такие как страницы фильтров, тегов и пагинации, следует отдельно оценить на предмет целесообразности включения в карту, чтобы не смешивать большое количество малоценных адресов.
Когда структура разделов ясна, охват индексации карты получает обоснование, а не просто выгрузку всех адресов из админпанели.
Проверьте соответствие URL страниц разделов и записей карты
После инвентаризации структуры разделов переходите к сверке адресов. Сравните список URL страниц разделов с записями в файле карты, обращая внимание на три момента:
- Все ли адреса страниц разделов присутствуют в карте, особенно подразделов;
- Все ли адреса в карте открываются нормально, нет ли устаревших адресов, оставшихся после редизайна;
- Существует ли для одного раздела несколько адресов (например, версии с параметрами и без них), и если да, определите, какой из них является основным.
При сверке рекомендуется экспортировать таблицу, поля которой должны включать как минимум: название раздела, уровень раздела, адрес страницы, наличие обновлений контента, включён ли в карту. Такой список можно будет использовать при каждой последующей проверке, не составляя его заново.
Способ генерации карты должен соответствовать ритму поддержки разделов
Карта не генерируется один раз и навсегда. Разделы корпоративного сайта корректируются, контент добавляется, и карта должна обновляться соответственно. Есть два распространённых подхода: автоматическое обновление карты при публикации контента через админпанель или плагин; либо регулярная ручная перегенерация. Выбор зависит от частоты изменений разделов и привычек команды.
Если структура разделов часто меняется, автоматическое обновление удобнее, но нужно убедиться, что новые страницы разделов действительно включаются. Если разделы стабильны и обновления касаются в основном контента, можно использовать регулярную ручную генерацию, но следует установить период проверки, например, раз в месяц сверять соответствие записей карты и списка разделов.
В любом случае следует избегать ситуации, когда раздел уже объединён или удалён, а в карте остаётся старый адрес. Если такие адреса возвращают страницу ошибки, это затрудняет оценку при проверке базы индексации.
После отправки карты вернитесь к структуре разделов для повторной проверки
После отправки или обновления карты проверка не заканчивается. Более эффективный подход — вернуться к самой структуре разделов и последовательно пройти по навигационным входам: можно ли войти в раздел первого уровня, можно ли войти в подраздел, нормально ли открываются ссылки на контент внутри страниц разделов. Этот шаг проверяет, могут ли пользователи и поисковые системы добраться изнутри сайта до адресов, перечисленных в карте.
Если страница раздела есть в карте, но в навигации нет входа к ней, или до неё нужно добираться с главной страницы через множество уровней, это указывает на разрыв между структурой разделов и охватом карты. В таком случае либо добавьте навигационный вход, либо пересмотрите необходимость включения этой страницы в карту.
Закрепите действия по проверке в виде многоразового чек-листа
Чтобы проверка базы индексации не зависела от памяти конкретного человека, можно оформить вышеописанные действия в фиксированный чек-лист, который выполняется после каждого редизайна или масштабного обновления:
| Пункт проверки | Действие | Критерий оценки |
|---|---|---|
| Уровни разделов | Перечислить все разделы первого и второго уровня | Группирующие и контентные разделы различены |
| Адреса страниц разделов | Сверить с записями карты по одному | Все адреса страниц разделов в карте, нет лишних старых адресов |
| Доступность адресов | Открыть каждый адрес из карты | Все открываются нормально, нет страниц ошибок |
| Доступность из навигации | Пройти с главной страницы по уровням разделов | Все страницы разделов из карты достижимы через навигацию |
| Механизм обновления | Убедиться, что карта обновляется при изменениях разделов | После добавления или изменения разделов карта синхронизируется |
Этот чек-лист не требует выполнения всех деталей за один раз, а задаёт фиксированный порядок каждой проверки: сначала структура, затем адреса, затем доступность, и наконец механизм обновления. При стабильном порядке проблемы реже остаются незамеченными.
Типичные проблемы взаимодействия и направления их решения
На практике случаи плохого взаимодействия sitemap и структуры разделов довольно однотипны, и направления решения также достаточно определённы:
- Записей в карте больше, чем реального контента в разделах: сначала определите, являются ли лишние адреса страницами фильтров, тегов или старыми адресами, затем решите, оставить их или удалить.
- В разделе есть контент, но его нет в карте: проверьте, не исключена ли эта страница раздела правилами генерации карты или не отсутствует ли у неё отдельный адрес страницы.
- После изменения разделов карта не обновлена: убедитесь, что механизм обновления охватывает изменения разделов, при необходимости выполните ручную перегенерацию.
- Несколько адресов для одного раздела: определите основной адрес, остальные обработайте единообразно, чтобы избежать дублирования в карте.
Эти решения не требуют сложных инструментов; главное — сначала иметь список разделов, затем список карты, и сравнивать их между собой.
Если вы планируете провести проверку базы индексации, начните с экспорта списка разделов: оформите разделы первого и второго уровня и соответствующие адреса в таблицу, а затем используйте эту таблицу для сверки с файлом карты. Когда структура ясна, решить, что включать в карту и что убирать, становится намного проще.
