Ученые сделали еще один шаг к тому, чтобы печатать или писать тексты можно было молча, просто напрягая мышцы руки. Представьте, что вы пишете буквы и цифры в воздухе, а браслет на запястье считывает электрические сигналы мышц и понимает, что именно вы написали. Звучит как фантастика, но проблема тут не в том, чтобы распознать жест, а в том, что сигналы мышц у всех людей разные и даже у одного человека меняются в течение дня.
Авторы новой работы — Анна Макарова, Мария Голицына и Михаил Лебедев — решили бороться именно с этой нестабильностью. Они собрали компактную нейросеть, которая объединяет сверточные слои и трансформер. Свертки вытаскивают из сигнала характерные паттерны, а трансформер следит за их последовательностью во времени. На вход подаются данные с восьми электродов, на выходе — распознанная буква или цифра.
Результаты честно показывают главную боль технологии. Когда сеть обучали и проверяли на одних и тех же записях, точность была высокой — почти 0.92 по метрике macro F1. Но стоило показать ей запись от нового сеанса, как точность падала до 0.62. Модель буквально не узнавала те же движения, потому что мышцы звучали иначе.
И вот тут самый интересный момент. Оказалось, что для адаптации хватает несколько примеров. Показали сети дополнительные образцы — и точность подскочила до 0.83. Десять примеров — и вот уже 0.925, то есть почти как в идеальных условиях. То есть не нужно заново собирать огромный датасет под каждого пользователя, достаточно короткой калибровки.
Авторы также сравнили свою архитектуру с другими подходами, и она оказалась точнее и классических методов, и обычных нейросетей. Если подобные модели доведут до потребительских устройств, мы получим по-настоящему бесшумный и незаметный способ ввода текста — без клавиатуры, экрана и голоса.
https://www.biorxiv.org/content/10.64898/2026.08.12.740174v1
Post #15947
580
- ❤ 5