Jaiveer Singh рассказал о развитии открытого стека NVIDIA Isaac ROS для робототехники

Инженер NVIDIA Jaiveer Singh, который возглавляет команду NVIDIA Isaac ROS, рассказал, как компания выстраивает инфраструктуру для робототехники: от программного обеспечения до инструментов для работы с камерами, сенсорами и вычислениями. Платформа Isaac ROS основана на открытом фреймворке ROS 2. В нее входят CUDA-ускоренные библиотеки и AI-модели для разработчиков автономных мобильных роботов, систем манипуляции и гуманоидных роботов.

Как сообщает NVIDIA Blog, Isaac ROS появился из внутреннего стажерского проекта Singh. Тогда команда экспериментировала с открытым ПО для робототехники на базе NVIDIA Jetson и библиотек NVIDIA CUDA. По словам Singh, разработчикам был нужен доступ ко всей вычислительной мощности GPU, а также возможность сочетать новые компоненты с уже существующим кодом ROS.

В NVIDIA считают, что следующему этапу развития physical AI нужен полноценный программно-аппаратный стек. В него входят симуляция, обучение, ускоренные вычисления, AI-модели, middleware и edge-развертывание. Isaac ROS поддерживает задачи, связанные с манипуляцией, мобильностью и разработкой гуманоидов. Платформа также включает пакеты для восприятия окружения, обнаружения объектов, картографирования, обнаружения столкновений и планирования движения.

Платформа может работать на рабочих станциях, персональных AI-суперкомпьютерах NVIDIA DGX Spark и edge-системах NVIDIA Jetson.

Singh отдельно подчеркнул значение открытого исходного кода для робототехнических компаний. По его словам, открытая архитектура дает разработчикам уверенность в том, что стек можно будет адаптировать и дорабатывать в будущем, даже если рынок и технологии продолжат быстро меняться.