Исследователи Google разработали технологию на основе искусственного интеллекта, способную создавать звуки, которые человек никогда не слышал. Создатели системы — Джесси Энгель (Jessie Engel), Синьон Резник (Cinjon Resnick) и другие члены команды Google Brain. Технология называется NSynth, или Нейронный синтезатор, и описывается как «новый подход к синтезу музыки, призванный поспособствовать творческому процессу».

Может показаться, что с помощью NSynth исследователи просто одновременно играют на двух инструментах или накладывают звуки один на другой, но на самом деле это не так. Программное обеспечение создаёт совершенно уникальные звуки, используя «математические характеристики нот», которые производят разные инструменты. NSynth поддерживает около тысячи инструментов — от скрипки до диджериду.

«В отличие от традиционного синтезатора, который создаёт звук из созданных вручную компонентов вроде осцилляторов и волновых таблиц, NSynth использует глубокие нейронные сети для создания звуков на уровне отдельных образцов, — написала команда. — NSynth учится непосредственно на данных, даёт исполнителям интуитивный контроль над тембром и динамикой и возможность находить новые звуки, которые было бы сложно или невозможно воспроизвести с помощью настроенного вручную синтезатора».

Музыкальный критик Марк Вайденбаум (Marc Weidenbaum) рассказал, что идея не нова, но гораздо более искусна, чем когда-либо прежде. «В смешивании инструментов нет ничего нового, — заявил он. — В художественном плане это может позволить создать ряд интересных вещей, и, поскольку это Google, они будут интересны людям».

«Мы хотели разработать творческий инструмент для музыкантов и дать новую задачу сообществу машинного обучения, чтобы простимулировать исследования в сфере генеративных моделей музыки», — говорят разработчики NSynth.

Google Brain покажет технологию на фестивале Moogfest, который пройдёт с 18 по 21 мая в Дареме, что в Северной Каролине.