Meta выпустила неинвазивный декодер мозговой активности в текст: Brain2Qwerty v2

Пока все пишут про соннет 5, Meta AI показали систему, которая восстанавливает набираемый текст по сигналам МЭГ - без ымпланта механикусов в моск.

Дикслеймер - это не "ИИ читает мысли" а вторая итерация их проекта.. Участники слушали предложение, запоминали его, а потом печатали на клавиатуре. Система декодирует активность, связанную с подготовкой и выполнением набора текста, а не вытаскивает из головы произвольный внутренний монолог.

Что внутри

9 добровольцев, примерно 22 000 предложений, по 10 часов MEG-записей на человека.

Пайплайн работает end-to-end:

— из непрерывного MEG-сигнала модель восстанавливает символы, слова и затем предложение
— CTC убирает необходимость знать тайминг каждого нажатия клавиши
— дообученная LLM помогает собрать из шумного нейросигнала связную фразу
— AI-агенты перебирали варианты пайплайна и гиперпараметров, но финальную конфигурацию выбирали инженеры - в нейронауке есть еще взрослые в комнате.