NVIDIA представила Isaac ROS 5.0

На конференции ROSCon в Торонто NVIDIA представила Isaac ROS 5.0 — обновленную версию набора GPU-ускоренных пакетов и моделей искусственного интеллекта для разработки робототехнических приложений на базе открытого исходного кода ROS 2. Новый релиз включает в себя усовершенствованные рабочие процессы для ИИ-агентов и расширенную поддержку платформы.

В Isaac ROS 5.0 добавлена поддержка ROS 2 Lyrical и Ubuntu 24.04, что позволяет разработчикам использовать наиболее современные инструменты ROS, сохраняя возможность ускорять ресурсоемкие задачи с помощью вычислительных ресурсов NVIDIA. Главным архитектурным изменением релиза стал отказ от NITROS - предыдущего интерфейса передачи данных между узлами. Вместо него NVIDIA совместно с Open Source Robotics Alliance внесла в ROS Lyrical стандартный интерфейс обработки данных rosidl::Buffer с CUDA-бэкендом, рассчитанный на эффективную работу на различном вычислительном оборудовании, включая GPU.

Одним из ключевых нововведений стала интеграция агентных рабочих процессов — готовых инструментов и сценариев, которыми могут пользоваться как разработчики, так и ИИ-агенты. Отдельный workflow для FoundationStereo позволяет адаптировать модель к конкретным камерам, окружающей среде и робототехнической задаче. Документация Isaac ROS также стала ориентирована на работу с ИИ-агентами, чтобы они могли лучше понимать доступные инструменты и последовательность действий при разработке. FoundationPose, модель для оценки позы и отслеживания положения объектов, получила готовую библиотеку для инференса, ориентированную на использование ИИ-агентами, а NVIDIA заявляет об ускорении оценки и отслеживания положения и ориентации объектов до 5,5 раза. Отдельным готовым инструментом стал workflow для задач pick-and-place, объединяющий обнаружение объекта, оценку глубины и определение его положения.

При этом Isaac ROS 5.0 развивается не только как набор программных пакетов для разработки. NVIDIA расширила поддержку вычислительных платформ Jetson — от Jetson Orin Nano до Jetson Thor, что позволяет использовать общую программную основу при переходе от разработки к запуску робототехнических приложений непосредственно на роботе. Новая версия уже используется в проектах Mentee Robotics, Universal Robots, ROBOTIS, Noble Machines и других компаний, работающих с робототехническими системами.

Документация Isaac ROS доступна по данной ссылке.