🎓 — Семинар 11. Память и трансформеры в обучении с подкреплением | Егор Черепанов

Память является фундаментальной когнитивной способностью человека, позволяющей нам решать, казалось бы, простые, но всё ещё неподъёмные для современных роботов задачи из повседневной жизни. Например, без памяти роботы не способны даже протереть полку от пыли или достать ровно три ложки крупы из банки.

Различные механизмы памяти, пришедшие из других разделов глубокого обучения или разработанные специально под задачи обучения с подкреплением, призваны решить данную проблему. Однако на практике все они имеют свои ограниченные условия применения, преимущества и недостатки, а универсального подхода для ответа на вопрос "Как добавить память роботу?" всё ещё нет.

На семинаре аспирантом нашего Центра будут рассмотрены существующие механизмы памяти, разработанные для задач обучения с подкреплением и робототехники, а также будет представлена новая работа ELMUR: External Layer Memory with Update/Rewrite for Long-Horizon RL, в которой память реализуется в виде специальных матриц, интегрированных в каждый слой трансформерной архитектуры.

🪼 Сайт проекта
👉🏻 Дата: 13.11.25, четверг в 17:00
📹 Трансляция Youtube или ВК

Подключайтесь к живому обсуждению и задавайте вопросы в прямом эфире! Ждем всех!

#RL #transformers