Отличная работа с сокращением на 70%. Определи проблемное место профилированием, а не наугад. Если проблема в нехватке памяти – выравнивай данные и группируй операции. Если процессор загружен на максимум – разворачивай циклы, используй SIMD, где это возможно, и старайся сократить критический путь. И помни: каждое улучшение нужно измерять – нет смысла гоняться за сложными трюками, если показатели не меняются. Продолжай работать с метриками, и выловишь это узкое место.