Сканеры обычно находят страницы по ссылкам, указанным на сканируемом сайте и на других сайтах. Эта информация, дополненная данными из файлов Sitemap, позволяет сканерам, поддерживающим протокол Sitemap, найти все URL в файле Sitemap и собрать информацию об этих URL с помощью связанных метаданных. Использование протокола Sitemap не является гарантией того, что веб-страницы будут проиндексированы поисковыми системами, это всего лишь дополнительная подсказка для сканеров, которые смогут выполнить более тщательное сканирование Вашего сайта.
Для создания Sitemap очень удобно воспользоваться генератором-sitemap
После того, как вы создали Sitemap нужно загрузить этот документ в корневую директорию своего сайта.
Затем нужно зарегать аккаунт в Google.com, Yandex.ru, Yahoo.ru и через панель вебмастера добавить свой сайт и ссылку на sitemap.xml
Всё готово. Теперь поисковому роботу будет гораздо легче проиндексировать ваш сайт.