Google создал сервис, который превращает напетую мелодию в скрипичное соло

Новый сервис компании Google под названием Tone Transfer может превратить любую напетую мелодию в качественный музыкальный трек.

Для этого пользователю необходимо со смартфона или рабочего стола декстопа записать 15-секундный трек своего голоса или инструмента. Затем алгоритм машинного обучения Google преобразует эту мелодию в трек с флейтой, саксофоном, скрипкой или трубой. Качество трека будет зависеть от микрофона и фонового шума при записи. 

Команда Magenta AI компании Google, которая создает технологии с открытым исходным кодом для изучения использования машинного обучения в искусстве, создала библиотеку под названием «Дифференцируемая цифровая обработка сигналов (DDSP)», чтобы сделать этот инструмент возможным. С помощью библиотеки DDSP разработчики могут обучать алгоритм синтезу звука с меньшим количеством параметров и меньшим объемом данных.