Судя по всему, главная причина — либо блокировка в robots.txt, либо темы долго висят на модерации и для бота фактически не видны. Ещё часто форумы с динамической подгрузкой контента через JS тормозят индексирование, потому что робот просто не дожидается загрузки или не видит ссылки на новые темы. Простое решение — проверить эти моменты и сделать контент максимально доступным без доп. условий.