Sitemap.xml – это простой файл, в котором прописан широкий спектр команд для поисковых роботов. Этот файл объединяет HTML-страницу со всеми возможными поисковыми системами, делая её «видимой», и выступает вторым по важности файлом для поисковых краулеров, после файла robots.txt.
Вопрос индексирования
Самая частая ошибка, считать, что Google автоматически проиндексирует все страницы, которые вы добавили в Sitemap. Карта сайта – это лишь рекомендация для гуглбота. Такая же как и внутренние ссылки.
Общее качество сайта
Вероятно, что у Google есть какой то один параметр, который оценивает общее качество сайта. И это качество сайта зависит от количества полезных страниц среди всего количества страниц, что уже в находятся индексе. То есть, если из 100 страниц, 10 ваших страниц в ТОПе, а 90 малоинформативные и находятся на задворках поисковой выдачи, то удаление части этих бесполезных страниц, или запрет их индексации может повысить параметр общего качества сайта. Чтобы оценить насколько это допущение для вас работает, закройте от индекса или удалите часть слабых страниц, обновите свой sitemap и следите за позициями самых ценных страниц.
Проблемы с огромными сайтами
Собственники гигантских сайтов могут боятся настраивать XML-файл, если думают, что каждая страница вводится вручную. К счастью, это еще одно заблуждение. Статические файлы старомодны и более применимы для некоторых миниатюрных сайтов-визиток.
Большие сайты могут извлечь много пользы из популярных динамических XML-файлов, которые самонастраиваются для роботов. Пользователю даже не потребуется отправлять его вручную в Google Search Console. Документ будет содержать набор общих параметров, которые применятся ко всему сайту. Весь сайт подвергнется процедуре упорядочивания по категориям согласно самым простым соотношениям «да» – «нет».
Это будет особенно эффективно для сайтов с большим количеством видов контента, так как пример файла sitemap будет способен распознавать необходимые и полезные файлы и скрытые объекты, которые будут полезны для ускорения процедуры индексации сайта. Каждая следующая обновленная страница будет проходить ту же процедуру сканирования, в соответствии с требованиями, указанными в динамическом файле. Динамический XML-файл решает, следует ли её индексировать или нет в соответствии с первоначально заданными параметрами.
Итоги
- Очень важно задавать правильные команды, которые не будут конфликтовать друг с другом.
- Для больших сайтов динамический XML-файл будет более эффективным, поскольку этот элемент будет согласовывать все действия и данные между роботами и поисковой системой.
- Используйте дополнительный инструмент проверки карты сайта, перед её публикацией.