Google розробила штучний інтелект, який генерує музику за текстовими описами

Система Google Musi­cLM навчалася на наборі даних із 280 000 годин музики і може створювати особливо складні композиції (наприклад, для таких текстових запитів, як “чарівна джазова пісня з незабутнім соло на саксофоні і соло співака” або “берлінське техно 90‑х із низьким басом і сильними ударними”).

Своїм глибоким навчанням Musi­cLM, власне, і вирізняється з‑поміж інших систем ШІ для генерування пісень — Rif­fu­sion, Dance Dif­fu­sion, AudioML від Google та Juke­box від Ope­nAI. Всі вони дещо обмежені технічними можливостями та меншою кількістю використаних для навчання даних.

Musi­cLM також можна керувати за допомогою комбінації зображення і тексту або генерувати аудіо з певним типом інструмента в певному жанрі. Можна вибрати навіть рівень досвіду “музиканта”, також система здатна створювати музику, натхненну місцями, епохами або вимогами в контексті чогось (наприклад, мотиваційна музика для тренувань).

Але Musi­cLM поки що знаходиться в альфа-режимі — деякі зразки мають спотворену суть та якість, що є побічним ефектом процесу навчання. І хоча технічно Musi­cLM може генерувати людський вокал, звучить це не надто реалістично.

Водночас Google не поспішає випускати цей інструмент для широкого загалу враховуючи етичні проблеми, з якими він може зіткнутися. Musi­cLM, як і інші системи, використовувала в навчанні захищений авторським правом матеріал, а під час експерименту виявилося, що близько 1% результатів було безпосередньо відтворено з пісень, на яких тренувалася система.