Штучний інтелект зміг відтворити музику на основі мозкової активності людини

Науковці Каліфорнійського університету у Берклі проаналізували записи мозкової активності 29 пацієнтів, які під час операції на мозку слухали трихвилинний уривок пісні «Another Brick in the Wall, Part 1» гурту Pink Floyd. Зібрані у процесі прослуховування дані про електричну активність мозку науковці обробили за допомогою алгоритмів машинного навчання, щоб виокремити закономірності реакції мозку на окремі елементи пісні. Про це повідомляє nauka.ua.

Вчені визначили нові ділянки кори, які залучені до виявлення ритму, та з’ясували, що одні частини слухової кори більше реагують на початок співу чи звучання синтезатора, тоді як інші — на тривалий вокал. Також нейробіологи підтвердили, що права півкуля мозку більш чутлива до музики, ніж ліва.

Дослідники змогли реконструювати фрагмент почутої пісні, використовуючи лише дані про мозкову активність учасників. Поки що технологія лише зароджується, однак у ШІ-реконструкції вже можна розпізнати риси пісні:

Нагадаємо — штучний інтелект DALL-E 2 доповнив обкладинку відомого музичного альбому The Beatles «Abbey Road», випущеного у квітні 1970 року. На фото музиканти переходять вулицю Ебі Роуд. Під керівництвом блогера нейромережа домалювала зображення за рамкою фото, показавши дорогу по краях «зебри». DALL-E 2 розмістив на переході велику кількість людей, додав мобільні телефони в їх руки та футуристичні хмарочоси. За словами користувачів, склалось враження, що The Beatles йдуть із минулого у майбутнє.