Phanes AI выпустила систему сбора данных для обучения полнотелых роботов
Продолжение поста

Системы вроде EgoScale строятся на видео от первого лица: они фиксируют, что делают руки, но упускают движения ног, корпуса и силу касания. SeePhys Hub добавляет именно эти данные, сохраняя лёгкость носимого оборудования.

Phanes AI позиционирует SeePhys Hub как средний уровень в трёхуровневой пирамиде данных для обучения роботов. Нижний уровень — интернет-видео с дополненными позой и тактильными данными; верхний — высокоточный захват движений и данные с реальных роботов; средний, где работает SeePhys Hub, — носимые устройства, которые позволяют масштабировать сбор данных в реальных условиях без привязки к роботу.

Тактильные перчатки сделаны опциональными намеренно: операторы сервисов сбора данных первым делом просили не обязывать надевать их — при работе с водой они мешают точным движениям и дают шумовой сигнал. В тестах команды перчатка после нескольких захватов влажного стакана фиксировала давление на пустой ладони. Поэтому перчатки и браслеты можно использовать раздельно, а команда параллельно разрабатывает оценку тактильных данных по видео.

SeePhys Hub продолжает серию исследований команды: в мае 2026 года вышли датасет EgoTouch и модель TouchAnything для оценки зон контакта по видео, а TouchWorld научила робота корректировать захват по тактильной обратной связи в реальных задачах — вставка вилки, протирка сковороды, извлечение салфетки.

Следующий шаг — полномодальная мировая модель, которую команда планирует выпустить в 2027 году. Приоритетные области применения — промышленность и общественное питание.

Источник: QbitAI (🇨🇳)

#PHANESAI #SeePhysHub #робототехника #мультимодальныеданные