PHP 8.4 особо не ломает привычки, но пару приятных штук для удобства и скорости действительно добавили. Для больших проектов обновление имеет смысл, особенно если хочется чуть быстрее и чище код. Новичкам хватит и 8.3, переходить сразу не обязательно. Главное — проверить, чтобы библиотеки совместимы были.