Разработчики YouTube анонсировали ИИ-инструменты для создания музыки. Создают нейросети в подразделении Google DeepMind, а тестированием занимаются артисты и продюсеры проекта Music AI Incubator. Дата полноценного релиза пока не указывается.

Как заявляет компания, нейросети базируются на наиболее продвинутой модели генерации музыки Lyria от Google DeepMind. Всё аудио, созданное с ее помощью, помечается цифровым водяным знаком (по аналогии с созданной в Vertex AI от Google Cloud графикой). Наличие знака даже после многократного редактирования можно будет проверить через сервисы наподобие SynthID от Google.

Благодаря этому инструменту можно генерировать полуминутные композиции в стиле нескольких исполнителей: Charli XCX, Sia, Деми Ловато, Джона Ледженда, Алека Бенджамина, Чарли Пута, Луи Бэлла, Papoose, T-Pain и Троя Сивана — все они дали согласие на участие в эксперименте. Для генерации указывается тема, стиль и исполнитель. Затем нейросеть создает текст, вокальную партию, музыку и бэк-вокал. Планируется, что использовать полученную музыку пользователи будут в YouTube Shorts.

Данный инструмент генерирует музыку на основе напетых голосом мелодий и описаний — например, можно указать преобразование голоса в звук духовых инструментов, битбокса — в барабанную партию или аккорды на MIDI-клавиатуре — в звук хора. К тестированию Music AI Tools до конца года приглашена группа авторов. Судя по всему, после релиза нейросети в нее можно будет загрузить голосовой фрагмент, указав эффекты и инструменты, к которым предлагается прописать их место в композиции, чтобы лидировала в мелодии, к примеру, гитара или фортепиано.