Заметил, что новые темы на моём форуме вообще не появляются в поиске Яндекса, хоть и заходят боты регулярно. Пробовал проверять через Яндекс.Вебмастер — никаких явных ошибок, robots.txt в норме, с каноникалами тоже порядок. Кэш обновляется, но сами новые страницы не индексируются.
Вроде основные причины могут быть в том, что структура форума не даёт «веса» этой странице, или Яндекс решает не пускать на индексацию, если активность по теме низкая (нет ответов, лайков). Ещё иногда помогает ручная отправка ссылки через вебмастер, но постоянного решения это не даёт.
Один раз видел, как обновление карты сайта с новыми урлами помогло, но тоже не сразу. Ещё подумал, что, возможно, конкуренция по запросам слишком высокая, и форум просто не попадает в первые страницы — тогда индекс страницы есть, но она не в выдаче.
Кто сталкивался? Есть ли смысл добавить внутренние ссылки на новые темы с главной или из других веток, чтобы Яндекс внимательнее относился? Или всё это сильно зависит от траста всего домена?