Как она устроена
1️⃣ Первая нейросеть проанализировала тысячи видео и связала каждое с его текстовым описанием
2️⃣ Вторая нейросеть обучалась на данных МРТ, где фиксировалась активность мозга участников, смотревших эти видео
3️⃣ Затем специальный AI-декодер научили соотносить данные об активности мозга с конкретными сюжетами из видео и расшифровывать, что человек видел
4️⃣ Когда участники вспоминали видео, AI также восстанавливал сюжет
Почему это прорыв
🤩🤩🤩🤩🤩🤩🤩
➖ Раньше модели могли считывать только отдельные слова: «вода», «дерево», «человек»
➖ Теперь нейросеть восстанавливает целые визуальные образы вроде «мужчина прыгает в воду»
➖ Технология показала, что мозг обрабатывает восприятие и память похожим образом: система работала не только при просмотре видео, но и при воспоминании
🤩 Разработка может стать основой для интерфейсов «мозг-текст» и помочь людям, потерявшим возможность говорить.
🤩 Подробнее — в статье
🤔 — наши мысли стали субтитрами?