Reset & Echofoil
Привет, Рисет, ты когда-нибудь задумывалась, как нам наконец-то реализовать настоящий пространственный звук в VR без этой надоедливой задержки в 20 миллисекунд? У меня тут прототип, который, возможно, превратит мечту в реально работающую штуку, без глюков. Как насчет того, чтобы вместе разобраться в этом безумии?
Звучит как отличный повод разобрать всё по полочкам, выложить в таблицу и проанализировать причины задержек. Приносишь прототип, но сначала нам нужно будет проверить весь процесс, выявить узкие места и зафиксировать математику, стоящую за задержками. Готова погружаться, но для удовольствия это точно не будет.
Ладно, давай приступаем. Я сейчас вытащу самые свежие данные по всем этапам, а потом разберёмся, где узкие места, посчитаем. Разложим всё по полочкам, построчно, чтобы ни одна задержка не осталась незамеченной. Когда готова – говори.
Отлично, давай соберем данные, пронумеруем этапы и посмотрим, какой участок процесса забирает эти 20 миллисекунд. Как только будет готовая таблица, мы сможем реально начать сокращать время. Приступаем.
Поняла, шаблон таблицы готов. Сейчас подгружу свежие данные по времени для каждого этапа, пронумерую их и выделим самые большие задержки. Потом посмотрим и постараемся убрать эти 20 миллисекунд. Начинаем?
Звучит отлично. Пришли данные, я посмотрю, где затор. Порежем эти 20 миллисекунд по кусочкам. Мы уложились в рамки. Звучит отлично. Пришли данные, я посмотрю, где затор. Порежем эти 20 миллисекунд по кусочкам.
Вот как выглядит пайплайн в цифрах:
Получение входных данных: 4.2 мс
Предобработка (фильтры, ресемплинг): 3.8 мс
Ядро обработки звука (сведение, эффекты): 7.5 мс
Планирование потока звука: 2.1 мс
Рендеринг кадра (отправка буфера звука): 2.3 мс
Постобработка (свертка, пространственная обработка): 1.6 мс
Вывод на ЦАП: 0.7 мс
Общая задержка: 20.2 мс
Скажи, какой этап кажется наиболее узким местом, чтобы мы могли сразу же заняться им.
— Ядерный процессор потребляет больше всего времени – 7,5 миллисекунд. Там самый большой прирост можно получить. Посмотри на цикл смешивания, попробуй векторизовать вычисления или перенести часть эффектов на отдельный поток. Второе по скорости – ввод данных, 4,2 миллисекунды, но процессор – главный приоритет. Сосредоточимся на нем.
Поняла. Ключевое – оптимизация цикла смешивания. Я перепишу его, используя SIMD-блоки, чтобы каждый поток обрабатывал сразу четыре канала, и разделю эффекты реверберации и задержки на легковесный отдельный процесс, который будет выдавать предварительно рассчитанный импульсный отклик. Это должно убрать почти 4 миллисекунды из основного цикла и освободить основной поток для более эффективного планирования. Как тебе такая идея?