Center for Cognitive Modeling

🪼 — Поздравляем студентов с 1 сентября!

Сегодня на магистерской программе МТИИ прошёл первый учебный день.

Начало бодрое — сразу пять пар. Надеемся, что мы смогли вдохновить студентов на предстоящий учебный год.

Желаем удачи ребятам, пусть этот год принесёт много учебных и научных успехов!

🪼 — Приглашаем на лекцию "Интеллектуальная робототехника" нашего директора, Александра Панова

С 1 августа по 14 сентября в преддверии Дня Города проходит серия различных мероприятий Москва-2030. В рамках ивента завтра на площадке МГТУ им. Н.Э. Баумана, в Новом кампусе, пройдет лекция Александра Панова на тему Интеллектуальной робототехники.

На лекции обсудим, что из себя представляет современная робототехника и как совершенствуются «железо» и программное обеспечение для управления роботами. Поговорим об использовании нейросетевых моделей для обучения выполнению действий и о том, как языковые модели помогают планировать действия робота.

🪼 Новый кампус МГТУ им. Н.Э. Баумана, Главная сцена
🪼 27.08.2025, 15:00-16:00
🪼 Регистрация не требуется

Приходите узнать, где в ближайшее время ждать повсеместного появления роботов-помощников!

🪼 — Развиваем soft skills преподавателей Центра на тренинге ISW

ЦКМ всесторонне развивается — недавно у нас появилась бакалаврская программа. Поэтому мы уделяем время не только науке, но и развитию преподавательских компетенций, улучшению учебных курсов.

На прошлой неделе наш сотрудник, к.т.н., сертифицированный фасилитатор ISW, Олег Буличев провёл Instuctional Skills Workshop. Это канадская программа, призванная повысить эффективность преподавания у инженеров.

За три дня обучающиеся прошли интенсивную программу: узнали новые методы, проэкспериментировали в подаче материала перед коллегами и обсудили профессиональные и этические темы.

Если вы хотите учиться в месте, где преподавателям не всё равно — поступайте к нам!

Набор в бакалавриат для студентов ФПМИ актуален до 8 сентября📝 подача заявки

Center for Cognitive Modeling pinned a photo

🪼 — Сегодня последний день набора на стажировку в области искусственного интеллекта и робототехники (Robotics, LLM, RL, CV, Planning)!

Оплачиваемая стажировка будет длиться 4-6 месяцев, в процессе работы вам будет помогать ментор. На выбор предоставляется 16 проектов, на страницах которых вы сможете найти описание и требования.

Два шага для подачи заявки:
1️⃣ выбрать подходящий проект на сайте
2️⃣ заполнить форму

Стажировку можно совмещать с написанием диплома, но нельзя совмещать с другой работой или стажировкой. А после успешного окончания возможно трудоустройство в лаборатории Центра, продолжение работы в компаниях-партнерах.

Вопросы можно задать в сообщениях @fissun.

#стажировка

В AIRI и МФТИ представили метод 3DGraphLLM для расширения возможностей LLM при работе с трехмерным пространством

Он учитывает пространственные и смысловые взаимосвязи элементов внутри помещения, что улучшает обработку сложных интерьеров, где объекты находятся близко друг к другу и образуют плотные композиции.

Специалисты подчеркивают, что большинство современных подходов, основанных на LLM, используют двумерные изображения, упуская трехмерную структуру пространства, или работают с необработанными облаками точек, игнорируя смысловое взаимодействие предметов. Из-за этого алгоритмы способны определить наличие стула и стола, однако не осознают факт, что стул расположен именно возле стола и предназначен для сидения.

Обучение модели происходило на больших датасетах — ScanNet, 3RScan, которые содержат точные реконструкции реальных помещений, и расширенных наборах данных — ScanRefer и Multi3DRefer, содержащих текстовые запросы к реконструированным сценам.

На данный момент ведутся работы по интеграции метода в реальные робототехнические платформы.

🔗Источник: https://airi.net/ru/blog/rossiyskie-issledovateli-nauchili-yazykovye-modeli-ponimat-slozhnye-trekhmernye-stseny/

Еще один мой выпускник 2025 года из нашей магистратуры в МФТИ - Роман Титков.

Тема его диплома: «Семантическая реконструкция 3D-сцен в реальном времени с использованием гауссовского сплаттинга».

По этой теме у Романа получились многообещающие результаты, которые мы развиваем сейчас вместе с Центром робототехники Сбера в рамках работы LEG-SLAM. Он разработал оригинальный подход по сжатию визуально-языковых признаков и добавления их в методы гауссовского сплаттинга, позволяющие задавать запросы на естественном языке к трехмерной карте. Статья по этой теме была принята на конференцию Neuroinformatics-2025.

Кроме того, он успел поучаствовать в написании нашей флагманской статьи BBQ, принятой на конференцию ICRA (A*).

Присущие Роману старательная работа с кодом, методичность в решении самых сложных задач, умение грамотно распределять время могли бы пригодиться ему в аспирантуре, если бы он решил продолжать академический трек.

#Person #Papers

Продолжаю отзывы: следующая по списку - выпускница 2025 года из нашей магистратуры в МФТИ - Ольга Матыкина.

Тема ее диплома: «Разработка и исследование методов мультимодальной сегментации сцены».

По этой теме у нее получилась хорошая работа по применению фундаментальных моделей для 3D-обнаружения объектов на данных камер и радаров RCDINO, принятая в журнал Optical Memory and Neural Networks. В ходе кропотливых экспериментов мы прочувствовали, что без видеокарт уровня A100 80Гб какого-то результата добиться практически невозможно для подобных задач.

Ольга много участвовала в индустриальных проектах, связанных с сегментацией и обнаружением объектов на изображениях для роботов и автомобилей от ООО ИнтеграНТ (см. Препринт) и ООО Вега-ГАЗ (статья принята в журнал Труды МФТИ). Продемонстрировала отличные навыки в реализации методов ИИ в ROS2

#Person #Papers

Следующая выпускница 2025 года из нашей магистратуры в МФТИ - Маргарита Кичик.

Тема ее диплома: «Распознавание физических свойств объектов трехмерных сцен по их RGB-изображениям».

Этой темой Маргарита занималась при выполнении проекта с Центром робототехники Сбера. Очень надеюсь, что некоторые части диплома превратятся в ближайшее время в хорошую научную статью.

Один из подходов, которым можно решить эту задачу - нейросетевые методы обнаружения и сегментации объектов на изображениями. Здесь Маргарите удалось дать свой вклад в индустриальную работу по детекции объектов на конвейерной ленте WaRP, популярной на Kaggle и опубликованной в журнале EAAI (Q1). Также она поучаствовала в нашем интересном исследовании вместе с AIRI в области активной сегментации SegmaTron, опубликованном в журнале Neurocomputing (Q1). Кроме того, удалось получить полезные результаты для нашего проекта STRLRobotics, в том числе, чтобы мобильный манипулятор открывал двери. Про это у нас есть статья в LNCS (Q2).

#Person #Papers

Следующая по списку в рубрике отзывов - выпускница 2025 года из нашей магистратуры в МФТИ по профилю МТИИ - Ульяна Изместьева

Тема ее диплома: «Применение генеративных моделей для аугментации обучающих данных в задачах сегментации изображений».

По этой теме мы сделали неплохую статью GenLab, принятую на Neuroinformatics-2025. А также успели посотрудничать с группой FusionBrain в AIRI.

Ульяна много участвовала в индустриальных проектах, связанных с распознаванием изображений для роботов и автомобилей от ООО ИнтеграНТ (Препринт) и ООО Вега-ГАЗ. В них мы четко прочувствовали, что часто требуется быстро готовить собственные датасеты с редкими категориями, на которых нужно учить нейронные сети. И решить эту задачу могут помочь диффузионные генеративные модели.

В самом начале магистратуры Ульяна также поучаствовала в написании интересной робототехнической статьи Rozumformer в журнале Q1, где наша команда реализовала оригинальный подход Real-to-Sim-to-Real для управления манипулятором.

#Person #Papers

Презентовали AmbiK 🥳

#ACL2025 А вот и наша группа от лаборатории, которая добралась до Вены. Жаль, что не всем дали визу вовремя, но такие времена...😎

Center for Cognitive Modeling pinned a photo

🦾🔥👩‍🚀 — Объявляем набор на стажировку в области искусственного интеллекта и робототехники (Robotics, LLM, RL, CV, Planning)!

Оплачиваемая стажировка в Центре когнитивного моделирования Института ИИ МФТИ предполагает работу над прикладными или поисковыми проектами в составе опытной команды, написание статей в ведущие конференции и журналы.

На выбор предоставляется 16 проектов, которые включают в себя:
🔹обучение с подкреплением
🔹компьютерное зрение
🔹планирование поведения и управление
🔹большие языковые модели
🔹и другое

Два шага для подачи заявки:
1️⃣ выбрать подходящий проект на сайте
2️⃣ заполнить форму

Стажировку можно совмещать с написанием диплома, но нельзя совмещать с другой работой или стажировкой. А после успешного окончания возможно трудоустройство в лаборатории Центра, продолжение работы в компаниях-партнерах.

Прием заявок до 11 августа 2025 включительно!

Вопросы можно задать в сообщениях @fissun.

#стажировка

Вышло небольшое интервью в Коммерсанте про интеллектуальную робототехнику, про тренды и про наши статьи на IROS (даже со ссылками🦾)