Мозг реконструирует песни.
Нейробиологи из Калифорнийского университета в Беркли смогли реконструировать часть музыкального произведения на основе активности мозга слушателей. Для этого они использовали систему ИИ. Также ученым понадобились данные, собранные во время другого эксперимента более 10 лет назад.
В 2012 году 29 пациентам больницы Медицинского центра Олбани на поверхность мозга установили электроды, которые записывали его активность. Пациенты лечились от эпилепсии и параллельно участвовали в научных исследованиях. В частности, им включали песню группы Pink Floyd «Another Brick in the Wall» и проверяли, могут ли модели декодирования различать различные музыкальные произведения и жанры.
В новом исследовании ученые повторно проанализировали старые записи ЭЭГ, чтобы проверить, может ли ИИ использовать данные активности мозга для реконструкции музыки и извлечения дополнительной информации. Эксперимент закончился успехом. Хотя получившаяся «композиция» не полностью соответствует оригиналу, в ней можно узнать основную мелодию.
Помимо реконструкции исследователи определили области мозга, участвующие в обнаружении различных музыкальных звуков. Они показали, что некоторые части слуховой коры мозга более чувствительны к ритму или звукам гитары, а другие — к вокалу. Результаты исследования помогут лучше понять устройство мозга и ускорить создание нейроимплантов и качественных интерфейсов мозг — компьютер.
Ознакомиться с получившимся результатом можно тут:
https://youtu.be/c5XqTszRvTY
#ии #исследованиемозга #песни
Нейробиологи из Калифорнийского университета в Беркли смогли реконструировать часть музыкального произведения на основе активности мозга слушателей. Для этого они использовали систему ИИ. Также ученым понадобились данные, собранные во время другого эксперимента более 10 лет назад.
В 2012 году 29 пациентам больницы Медицинского центра Олбани на поверхность мозга установили электроды, которые записывали его активность. Пациенты лечились от эпилепсии и параллельно участвовали в научных исследованиях. В частности, им включали песню группы Pink Floyd «Another Brick in the Wall» и проверяли, могут ли модели декодирования различать различные музыкальные произведения и жанры.
В новом исследовании ученые повторно проанализировали старые записи ЭЭГ, чтобы проверить, может ли ИИ использовать данные активности мозга для реконструкции музыки и извлечения дополнительной информации. Эксперимент закончился успехом. Хотя получившаяся «композиция» не полностью соответствует оригиналу, в ней можно узнать основную мелодию.
Помимо реконструкции исследователи определили области мозга, участвующие в обнаружении различных музыкальных звуков. Они показали, что некоторые части слуховой коры мозга более чувствительны к ритму или звукам гитары, а другие — к вокалу. Результаты исследования помогут лучше понять устройство мозга и ускорить создание нейроимплантов и качественных интерфейсов мозг — компьютер.
Ознакомиться с получившимся результатом можно тут:
https://youtu.be/c5XqTszRvTY
#ии #исследованиемозга #песни
YouTube
Scientists recreate Pink Floyd classic through listeners' brain activity
Credit: Bellier, L et al/PLOS Biology