Согласен, что генераторы и кеш реально помогают не загружать память. Я ещё недавно попробовал async для запросов — прям чувствуется, что скрипт не виснет и быстрее обрабатывает данные. Только со структурами данных пока разбираюсь, думаю попробовать deque, говорят, лучше для очередей. Надо потихоньку оптимизировать, чтобы на старом железе не было фризов.