Николай Чикишев 17 ноября 2023, 10:47

YouTube тестирует ИИ-генератор музыки: он имитирует стиль исполнителей и создает композиции по напетым мелодиям

Лаборатория DeepMind разработала нейросети, а участники проекта Music AI Incubator — авторы-исполнители и продюсеры — тестируют новые сервисы.

Оставить комментарий

YouTube тестирует ИИ-генератор музыки: он имитирует стиль исполнителей и создает композиции по напетым мелодиям

Лаборатория DeepMind разработала нейросети, а участники проекта Music AI Incubator — авторы-исполнители и продюсеры — тестируют новые сервисы.

Dream Track

Пользователь может сгенерировать 30-секундную композицию в стиле одного из девяти исполнителей, которые участвуют в эксперименте. Это Алек Бенджамин, Чарли Пут, Charli XCX, Деми Ловато, Джон Ледженд, Луи Бэлл, Papoose, Sia, T-Pain и Трой Сиван.

Инструмент можно использовать при создании коротких роликов Shorts. Для этого достаточно дать нейросети текстовое описание трека, сервис уже доступен «небольшой группе блогеров из США».

Пример генерации трека в Youtube Shorts. Источник: Youtube.

Music AI Tools

Сервис позволяет создавать композиции из напевов и детальных описаний. Избранные авторы могут протестировать инструмент до конца этого года. Пользователь загружает записанную заготовку или записывает ее через сервис, указывает инструменты, эффекты и их интенсивность.

Например, аккорды на MIDI-клавиатуре превратить в хоровое пение или напетую мелодию превратить в оркестровую музыку. Нейросети смогут трансформировать любой напев в соло на конкретном инструменте.

По словам представителей компании, новые инструменты работают на основе «самой продвинутой модели для создания музыки» — Lyria от лаборатории Google DeepMind. Она генерирует текст, инструментальные и вокальные партии.

Сгенерированные мелодии получат цифровой водяной знак. Человек не сможет распознать в записи отличительных звуков, но наличие знака можно будет проверить через сервисы, например, SynthID. Метка не слышна человеческому уху, но сохраняется при изменении трека, переживая сжатие MP3 или изменение скорости.

Ранее Youtube обязала пользователей отмечать созданный ИИ контент, который выглядит реалистично. Сгенерированная музыка, которая «имитирует уникальный стиль исполнителя», будет полностью запрещена на платформе. В случае нарушений пользователя отключат от программы монетизации.