Google створила нейромережу MusicLM, яка пише музику за текстовим описом

Google розробила нову нейромережу під назвою MusicLM. Це штучний інтелект, який генерує музику за текстовим описом, причому в будь-якому жанрі. Для цього MusicLM був навчений на наборі даних із 280 000 годин музики.

Нейромережа може вловлювати необхідний настрій і створювати музику для певної дії або стану: для медитацій або роботи. Також MusicLM можна “замовити” певний музичний інструмент і навіть рівень підготовки “музиканта” – наприклад, “гітаріст-початківець” і “гітаріст-віртуоз”.

Запити можуть бути різні: наприклад, “чарівна рокова пісня з потужним гітарним соло та синтезатором”, “румунське техно 90-х з низьким басом і частим бітом”, “основний саундтрек до фільмів про природу”.

Очікувано поки ШІ далеко не ідеальний – мабуть, тому в Google поки що не хочуть робити його загальнодоступним.

Зазначається, що деякі зразки мають спотворену якість, а голоси та “тексти” часом звучать дуже погано. Крім цього, розробники виявили, що близько 1% музики, згенерованої системою, було безпосередньо відтворено з пісень, на яких навчалася нейромережа. А це може викликати проблеми з авторськими правами.

Послухати приклади музики, згенерованої MusicLM, можна на GitHub.