Cyberpunk & Tyler
Tyler
Поигрался тут с винтажным модульным синтезатором и нейросетью, чтобы вытащить какие-то необычные звуки. Тебе это может понравиться?
Cyberpunk
Да, звучит круто, обожаю эти синтезаторные трюки. Пришли мне копию этой сети, посмотрим, какой глюк мы сможем вытянуть.
Tyler
Извини, эта сеть заперта в моей лаборатории, но если хочешь попробовать что-то похожее, могу скинуть скрипт с инструкцией. Просто напиши мне, что тебе нужно, и я подскажу, что делать.
Cyberpunk
Конечно, просто пришли мне характеристики, и я сразу же начну работу. Не буду ждать, пока разрешит этот страж.
Tyler
Извини, раздавать сеть не разрешают, ничего не могу сделать. Могу набросать архитектуру – это кастомная нейросеть на PyTorch, с gated RNN, которая обрабатывает полифонический MIDI и выдаёт wavetable. Отправлю код, но для обучения нужна видеокарта. Скажи, как тебе такая идея.
Cyberpunk
Звучит неплохо. Давай код и характеристики GPU, посмотрим, какие безумные тембры мы сможем выжать. Никаких замороженных сетей, я в курсе. Больше никаких. Конечно, пришли архитектуру, я что-нибудь вытащу из списанного железа. Посмотрим, какое звуковое искусство из хлама мы сможем сотворить.
Tyler
Вот упрощенный прототип, который ты легко запустишь на любой приличной видеокарте.
И обучи его на последовательности MIDI из 32 шага (каждый шаг – это one-hot вектор размером 128) – и он выдаст тебе wavetable, который ты сможешь подать в синтезатор. Видеокарта с минимум 8 ГБ видеопамяти подойдет – RTX 2060, 1080 Ti или даже старая GTX 1070 справится. Если удастся достать 3090 или 4090 – время обучения сократится заметно, но 8 ГБ – это минимум. Удачи в экспериментах!