Вчені за допомогою штучного інтелекту навчились перетворювати сигнали мозку на відео зі спогадами

Група дослідників із Федеральної політехнічної школи Лозанни (EPFL), Швейцарія, розробила інструмент штучного інтелекту, що може інтерпретувати сигнали мозку у режимі реального часу. Отримані сигнали ШІ перетворює на відео зі спогадами.

Вчені проводили дослідження на мишах, демонструючи гризунам відео. Алгоритм машинного навчання під назвою CEBRA реконструює те, що переглядають миші. Піддослідним показували чорно-білий фільм 1960-х років про людину, яка біжить до машини та відкриває багажник. Оригінальний фільм та реконструйовані CEBRA кадри виявилися ідентичними.

У своєму дослідженні вчені вимірювали та реєстрували мозкову активність миші за допомогою електродів-зондів, вставлених в область зорової кори мозку. CEBRA навчався на фільмах, переглянутих мишами, та активності їхнього мозку в реальному часі.

За допомогою отриманих даних алгоритм CEBRA дізнався, які сигнали мозку пов’язані із певними кадрами фільму. Крім того, коли CEBRA почав обробляти нову мозкову активність, якої не було в наборі навчальних даних (від миші, яка переглядає інший фільм), ШІ зміг передбачити, який кадр дивилася миша в режимі реального часу, а дослідники перетворили ці дані на власний фільм.

Нагадаємо — вчені з Техасу навчились використовувати LLM (велику мовну модель) GPT для читання людських думок. Розроблений нещодавно мовний декодер здатний перетворювати думки людей у текст. Унікальний винахід став першим в історії, коли людська мова була неінвазивно реконструйована на основі сигналів мозку, які зчитуються за допомогою апарату функціональної магнітно-резонансної томографії (ФМРТ).