Сканеры обычно находят страницы по ссылкам, указанным на сканируемом сайте и на других сайтах. Эта информация, дополненная данными из файлов Sitemap, позволяет сканерам, поддерживающим протокол Sitemap, найти все URL в файле Sitemap и собрать информацию об этих URL с помощью связанных метаданных. Использование протокола Sitemap не является гарантией того, что веб-страницы будут проиндексированы поисковыми системами, это всего лишь дополнительная подсказка для сканеров, которые смогут выполнить более тщательное сканирование Вашего сайта.
Sitemap 0.90, предоставляемый в соответствии с условиями лицензии Attribution-ShareAlike Creative Commons, получил широкое признание. Его поддерживают Google, Yahoo!, Yandex и Майкрософт.
Комментариев нет:
Отправить комментарий