Нейросеть «извлекла» песню Pink Floyd из мозговой активности слушателей

ИА БайкалИнформ   
17.08.2023 17:00

Нейробиологи из Калифорнийского университета в Беркли использовали систему ИИ для реконструкции части музыкального произведения на основе активности мозга слушателей. Хотя получившаяся «композиция» не полностью соответствует оригиналу, в ней можно узнать основную мелодию.

Нейросеть «извлекла» песню Pink Floyd из мозговой активности слушателей

Ученые использовали данные, собранные во время другого эксперимента более 10 лет назад. 29 пациентам больницы Медицинского центра Олбани на поверхность мозга установили электроды, которые записывали его активность. Пациенты лечились от эпилепсии и параллельно участвовали в научных исследованиях.

В частности, им включали песню группы Pink Floyd «Another Brick in the Wall» и проверяли, могут ли модели декодирования идентифицировать различные музыкальные произведения и жанры.

Исследователи из Калифорнийского университета повторно проанализировали старые записи ЭЭГ, чтобы проверить, может ли ИИ использовать данные активности мозга для реконструкции музыки и извлечения дополнительной информации. Эксперимент закончился успехом, отмечает hightech.fm

Помимо реконструкции исследователи определили области мозга, участвующие в обнаружении различных музыкальных звуков. Они показали, что некоторые части слуховой коры мозга более чувствительны к ритму или звукам гитары, а другие — к вокалу. Результаты исследования помогут лучше понять устройство мозга и ускорить создание нейроимплантов и качественных интерфейсов мозг — компьютер.

Ещё кое-что о науке:


Новости о всякой всячине

 

Сергей Шмидт - серия колонок

Видеосюжеты
Сергей Шмидт: Срок