У меня было похоже — убрав тормозящие сервисы и сменив bash на более легкий zsh с минимальными настройками, система реально ожила. Поправка с swap или zram тоже заметно разгрузила память, особенно на старом железе. Настройки файловой системы и лёгкий оконный менеджер типо i3 добавили ещё немного шустрости. Кажется, именно комплексный подход работает лучше всего, а не одна единственная настройка.