Погнал тему про одну боль — как часто вижу на форумах кучу косяков с тегами canonical и настройками robots.txt. Особенно когда темы дублируются, а каноникалы тупо указывают на себя или вообще не стоят, и в итоге поисковики дергаются от одного и того же контента на разных урлах.

Кто работал с этим на практике? Интересует именно реальный опыт, а не общая теория.