Поделиться

GANSynth — нейросеть для генерации аудио на основе MIDI-файлов искусственным интеллектом (ИИ).

Область применения : Дизайн, Саунд-дизайн

Преобразование : Аудио в аудио

Задача : Создать аудио


Подробнее о этой нейросети

GANSynth — это демонстрационная нейросеть, способная генерировать аудио с помощью генеративно-состязательных сетей. Она изучает производство индивидуальных инструментальных нот, подобно набору данных NSynth. Учитывая высоту звука в качестве условного атрибута, генератор обучается использовать свое латентное пространство для представления различных тембров инструментов. Это позволяет синтезировать исполнения из MIDI-файлов, сохраняя тембр постоянным или интерполируя между инструментами со временем.

Эта нейросеть синтезирует аудио на основе загруженных MIDI-файлов. Есть два варианта:
— Синтез аудио, в котором инструменты плавно и плавно переходят друг в друга.
— Интерполяция между двумя латентными векторами и генерация аудио в соответствии с выбранным MIDI-файлом.

Вы можете загрузить свой собственный MIDI-файл или использовать предоставленный по умолчанию. Количество секунд для интерполяции определяет скорость и плавность изменения инструментов.

Эта нейросеть генерирует аудио, а также отображает его спектрограмму Constant-Q. Вы также можете скачать полученный .wav файл (опционально).

Демонстрация GANSynth предоставляет возможности выбора случайных инструментов для интерполяции или использования собственной таблицы интерполяции. Вам также предоставляется среда, настроенная с помощью инструкций для запуска.

GANSynth — это пример нейросети, использующей искусственный интеллект (ИИ) для генерации музыкального аудио.

Поделиться