Южнокорейские нейробиологи создали математическую модель, способную с высокой точностью воссоздавать мелодии, которые человек мысленно проигрывает в памяти, по электрической активности мозга.

В экспериментах с участием десяти пациентов с эпилепсией ученые использовали вживленные электроды для считывания нейронных сигналов во время мысленного продолжения знакомых песен. Алгоритм декодировал не абсолютную высоту звуков, а относительные интервалы между нотами, что соответствует принципам восприятия музыки мозгом. Это позволило полностью реконструировать структуру воображаемых треков на основе пошагового анализа сигналов.

В дальнейшем исследователи планируют научить систему распознавать темп и громкость звучания.

Зачем это нужно: разработка ляжет в основу синтезаторов речи для полностью парализованных пациентов, которые сохранили ментальную активность, но утратили способность говорить и двигаться.