Исследователи из Южной Кореи представили математическую модель, способную реконструировать мелодии по электрической активности головного мозга. Разработка анализирует сигналы, возникающие во время мысленного воспроизведения музыки. Об этом пишет «Хайтек» со ссылкой на исследование в журнале eNeuro.

Учёные из Сеульского национального университета протестировали систему с участием десяти пациентов с эпилепсией. Добровольцам ранее установили клинические электроды для медицинского наблюдения, благодаря чему исследователи смогли применять метод электрокортикографии и напрямую регистрировать сигналы коры головного мозга.

Во время эксперимента участники сначала слушали начало знакомых детских песен. Затем воспроизведение прекращалось, после чего испытуемые мысленно продолжали мелодию и только затем напевали её вслух, чтобы исследователи могли сравнить результат с данными декодирования.

Анализ показал, что нейронная активность во время мысленного исполнения содержит сведения о последовательности музыкальных интервалов. Алгоритм определял не конкретную высоту звуков, а их относительное положение друг к другу. Такой принцип соответствует тому, как человеческий мозг запоминает музыку: узнавание мелодии сохраняется даже при смене тональности.

По словам авторов работы, объединение полученных данных позволило восстановить структуру воображаемых музыкальных фрагментов. В дальнейшем исследователи намерены научить систему распознавать также темп и динамику. В перспективе технологию могут использовать при создании средств синтеза речи для полностью парализованных людей, сохранивших сознание и способность мыслить.