Google создала нейросеть MusicLM, которая пишет музыку по текстовому описанию

Google разработала новую нейросеть под названием MusicLM. Это искусственный интеллект, генерирующий музыку по текстовому описанию, причем в любом жанре. Для этого MusicLM был обучен на наборе данных из 280000 часов музыки.

Нейросеть может улавливать необходимое настроение и создавать музыку для определенного действия или состояния: для медитаций или работы. Также MusicLM можно «заказать» определенный музыкальный инструмент и даже уровень подготовки «музыканта» — например, начинающий гитарист и гитарист-виртуоз.

Запросы могут быть разные: например, «волшебная роковая песня с мощным гитарным соло и синтезатором», «румынское техно 90-х с низким басом и частым битом», «основной саундтрек к фильмам о природе».

Ожидаемо пока ИИ далеко не идеален – видимо, поэтому в Google пока не хотят делать его общедоступным.

Отмечается, что некоторые образцы обладают искаженным качеством, а голоса и «тексты» порой звучат очень плохо. Кроме этого, разработчики обнаружили, что около 1% музыки, сгенерированной системой, было непосредственно воспроизведено из песен, на которых обучалась нейросеть. А это может вызвать проблемы с авторскими правами.

Послухати приклади музики, згенерованої MusicLM, можна на GitHub.