Нейросети разрабатывает Google DeepMind, а тестируют сервисы в рамках проекта Music AI Incubator — в нём состоят авторы-исполнители и продюсеры.

С помощью инструмента Dream Track можно сгенерировать 30-секундную композицию в стиле одного из девяти исполнителей, которые захотели поучаствовать в эксперименте. Это Алек Бенджамин, Чарли Пут, Charli XCX, Деми Ловато, Джон Ледженд, Луи Бэлл, Papoose, Sia, T-Pain и Трой Сиван.

Инструмент можно использовать при создании коротких роликов Shorts, он уже доступен «небольшой группе блогеров из США». Достаточно дать нейросети текстовое описание — например, «солнечное утро во Флориде, жанр R&B» или «баллада о том, что противоположности притягиваются, акустика».

Другой сервис с общим названием Music AI Tools позволяет создавать композиции из напевов и детальных описаний. Некоторые авторы смогут протестировать его до конца 2023 года.

Судя по скриншоту интерфейса, можно будет загрузить предзаписанную заготовку или записать её через сам сервис, а ещё указать инструменты, эффекты и «интенсивность» каждого прописанного элемента: например, чтобы основу мелодии задавало пианино или, наоборот, электрогитара.

Можно «на-на-на-кать» нужную мелодию, а ИИ преобразит её в оркестровую музыку, звучащую как саундтрек к фильму
Нейросети также смогут трансформировать любой другой напев в соло на конкретном инструменте — например, саксофоне, — и добавят к нему другие инструментальные партии.

По словам компании, новые инструменты работают на основе «самой продвинутой модели для создания музыки» — Lyria от Google DeepMind. Она генерирует и текст, и инструментальные и вокальные партии. Все мелодии, которые она создаст, получат цифровой водяной знак — такой же дают изображениям, сгенерированным Vertex AI от Google Cloud.

Человек не сможет распознать наличие в аудиозаписи отличительных звуков, но наличие водяного знака можно будет проверить через специальные сервисы вроде SynthID самой Google — даже после множества изменений.

Когда инструменты будут доступны широкой аудитории — не уточнили. Пока компания тестирует новые возможности.

ИСТОЧНИК: VC