💙NVIDIA выпустила базовую модель для управления всем телом робота

ИИ-трансформер обучили на motion capture датасете — около 700 часов данных, а под капотом 42 млн параметров и 9000 часов обучения. Модель назвали SONIC и она позволяет:
🔵 управлять телом робота через VR
🔵 повторять движения человека из видео
🔵 выполнять голосовые команды
🔵 работать совместно с VLA-моделями и танцевать в такт музыке

Тренд очевиден — ИИ-модели будут развиваться именно в эту сторону. Работа с симуляцией будет сокращаться, а роботы будут обучаться на основе наблюдений за работой людей.

Посмотрите, как G1 работает под управлением SONIC. Кстати, она опенсорс — если получится запустить на своем роботе, кидайте видео в комменты. Подробнее о разработке пишут тут.

@robotswe