Роборука научилась подбирать мелодии на слух за 2 минуты

Инженеры из Университета Южной Калифорнии создали механическую кисть Musician Hand, которая умеет играть на фортепиано на слух. Никаких загруженных партитур, нот или терабайтов обучающих данных. Роботу включили незнакомый фрагмент из 30 нот, и он с первой же попытки безупречно повторил его на клавишах. Во время слепого прослушивания профессиональные судьи так и не смогли со 100% уверенностью отличить игру куска пластика с моторами от исполнения живых пианистов.

Вместо того чтобы скармливать нейросети жесткие алгоритмы, разработчики дали роботу две минуты на разминку. Четырехпалая рука просто хаотично била по клавишам, а алгоритм запоминал, какое движение сухожильного привода выдает конкретный звук и громкость. Построив карту связей между моторами и нотами, Musician Hand смогла на лету перевести услышанную мелодию в физические движения.

Самое интересное, что музыка здесь - лишь красивая техно-демка. Истинная цель исследователей - медицина. Современные реабилитационные роботы и экзоскелеты слишком жесткие, они работают по шаблонам. А этот подход обучения через восприятие позволит создать умные костюмы, которые за пару дней изучат индивидуальную походку пациента с болезнью Паркинсона или после инсульта. Устройство не будет навязывать человеку идеальную математическую походку, а мягко подстроится под его личную моторику, помогая двигаться так, как удобно именно ему.

🥸 Новости IT: 📱 Telegram | 📱 ВК | 📲 MAX