АйТи Империал | Дневник робота

🖥 Магистранты ИТМО создали для IT Imperial прототип ИИ-сервиса, который может сократить ручную разметку видео на 80 %

Магистранты AI Talent Hub ИТМО создали для компании IT Imperial прототип сервиса, который превращает видео с действиями человека в черновик разметки для обучения роботов. Ручная обработка короткого ролика занимает 15–30 минут — прототип примерно за 1 минуту подготовил черновик разметки 30-секундного ролика, а человеку потребовалось ещё около 3 минут на проверку и исправления.

Для обучения робота видео превращают в последовательность шагов: отмечают границы действий, объект и ключевой кадр. Praxis автоматически готовит такую разметку, а специалист проверяет её на временной шкале, исправляет отдельные поля и выгружает данные. В отдельном эксперименте команда сравнила разметку с нуля и проверку автоматического черновика в одном редакторе. В одинаковых условиях работа с черновиком оказалась в 2,2 раза быстрее. Прогноз модели и правки человека хранятся отдельно, чтобы пересчитывать качество и использовать исправления для дальнейшего обучения.

Команда проверила 30 конфигураций. В итоговой схеме одна модель находит смену действий, а другая определяет действие и объект. Такое разделение позволяет отдельно настраивать временные границы и распознавание содержания. Окончательную разметку подтверждает специалист.
 

Определение временных границ проверили на 85 роликах: средняя ошибка составила 0,27 секунды, а 90% границ уложились в допустимое отклонение до двух секунд. В сквозном тесте на трёх собственных роликах временные границы совпали с эталоном для 72% шагов, а система верно назвала 71% совпавших действий. Отдельные компоненты показали работоспособность, но итоговое качество осталось ниже цели кейса: распознавание содержания и перенос на новые данные требуют доработки.

 
Прототипы создавались в рамках AI Product Hack 2026 — стартового семидневного хакатона-буткемпа магистратуры ИТМО AI Talent Hub. Над задачей работали одновременно 5 команд. Одновременно магистранты выбирали проектную и образовательную траекторию на семестр. Победителем стал проект Praxis, прототип создали Геннадий Фомин, Павел Лекомцев и Александр Деревягин.
 
В течение семестра команда продолжит работу над Praxis вместе с IT Imperial: проверит прототип на роликах компании, сравнит его с текущей разметкой и измерит качество и время коррекции. Если результаты прототипа подтвердится на данных IT Imperial, сервис сможет сократить ручную часть работы как минимум на 80%.

 «Мы в своей работе не всегда успеваем улучшить процессы внутри из-за фокуса на других задачах, но магистранты ИТМО показали нам новый взгляд на привычные для нас вещи. Уверен, что используем их решения в том или ином виде», — отметил Александр Слепцов, руководитель проектного офиса IT Imperial.

💬 «Мир Робототехники» в MAX

Сайт | VK | Telegram

#МирРобототехники #ИТМО #ITImperial #ИИ #РазметкаВидео #ОбучениеРоботов

🟩Вчера на встрече киноклуба современной документалистки совместно с Минпросвещением состоялся премьерный показ документального фильма «Я — твой робот» режиссера Натальи Кадыровой и команды @rtdocu

Команда «АйТи Империал» принимала участие в съемках и была приглашена, помимо просмотра фильма, на дискуссию с представителями отрасли после показа документалки.

Обсудили вероятности технологического апокалипсиса, мифы и реальность развития гуманоидной робототехники, особенно поразившие кейсы с профильных выставок, рост продаж гуманоидов, причины звучащих предложений по замедлению нейросетей, реалии внедрения роботов на российские промышленные предприятия, сложный и тернистый пусть России в развитии робототехники и многое другое.

«Робототехника — это командный вид спорта. Невозможно все сделать одному на всех этапах»

«Наша задача, в том числе, иногда тормозить ожидания рынка и говорить, что это круто и классно, но, наверно, давайте не сейчас»

«Поразительно, какая индустрия развернулась вокруг гуманоидных роботов. На выставке можно зайти в один из павильонов и собрать буквально чуть ли не в корзину, как в супермаркете, все, что тебе нужно, чтобы сделать своего робота»

Студенты московских вузов, интересующиеся робототехникой, приглашенные на премьеру, также приняли активное участие в дискуссии и задавали интересные вопросы.

Перед показом Анна Багдасарян поделилась с командной РТ.Док мнением о том, чем можно гордиться в российской робототехнике и какие скиллы российских инженеров превосходят, например, китайских коллег.

🎥Посмотреть фильм и сюжет с премьеры можно будет на сайте.

😉АйТи Империал

😅Дневник робота в МАКС

В гуманоидной робототехнике есть одна задачка со звездочкой, о которой говорят гораздо реже, чем, например, про физический ИИ⬇️

Как сделать так, чтобы робот работал как можно дольше без подзарядки. Батареи все еще остаются слабым местом.

Как нам рассказали сотрудники офиса компании UBTECH, у Walker S2, про которого мы уже писали, одна батарея работает до 3 часов. Всего на роботе их 2, то есть итого до 6 часов работы. Для робота, который должен работать на фабрике целую смену, этого явно недостаточно. А UBtech уже запустила в Лючжоу огромную фабрику для массового производства человекоподобных роботов, где машины непосредственно участвуют в сборке других роботизированных систем.

Но у UBTECH есть решение — Walker S2 умеет самостоятельно менять батареи без помощи человека. И это гораздо интереснее очередной демонстрации того, как гуманоид ходит или поднимает коробку. Потому что настоящий промышленный робот должен быть автономным не только в выполнении задач, но и уметь сам поддерживать себя в рабочем состоянии.

😉АйТи Империал

😅Дневник робота в МАКС

13 сентября (в этом году) День программиста 🦾

Праздник отмечается в 256-ой день года, ведь 256 — это общее количество различных значений, которые можно выразить с помощью одного восьмиразрядного байта. А еще это максимальная степень числа 2, которая умещается в количестве дней стандартного года. В високосный год праздник придется на 12 сентября 🤖

Команда всегда решает, так что ловите немного нашего бэкстейджа.

Сегодня показываем не разработку, сегодня показываем жизнь 🙌

Всех с праздником!

😉АйТи Империал

😅Дневник робота в МАКС