Обязательно ли делать sitemap для большого сайта?
есть большой форум. Полезные ссылки выглядят следующим образом: https://forum.woodtools.ru/index.php?topic=65548.0
Таких топиков порядка 43 тыс. плюс то что за точкой указывает на страницы топика, например https://forum.woodtools.ru/index.php?topic=65548.25
Общее число полезных ссылок > 50тыс.
С помощью стандартных плагинов SMF (движок форума) создать sitemap мне не удалось.
Вопрос: обязательно ли делать sitemap или поисковый бот яндекс/google сам разберется ?
В robots.txt я запретил все технические ссылки. ЧПУ ссылок нет
Ответы (1 шт):
При использовании карты сайта (sitemap.xml) роботам будет проще индексировать существующие/новые страницы сайта. Будь у меня большой сайт (форум), я бы обязательно сделал карту сайта и индексировал бы сайт с помощью cron (к примеру, раз в неделю в 4 утра).