[ad_1]
Nvidia объединилась с Open Robotics, чтобы использовать новые возможности искусственного интеллекта в операционной системе роботов (ROS).
В неисключительном соглашении Open Robotics будет расширять ROS 2, последнюю версию платформы робототехники с открытым исходным кодом, для лучшей поддержки оборудования Nvidia – и, в частности, ее диапазона Jetson, маломощных компонентов, которые объединяют ядра Arm с собственным графическим процессором компании. и ядра ускорителей глубокого обучения для работы с периферийными и встроенными приложениями искусственного интеллекта.
«Наши пользователи годами создают и моделируют роботов с оборудованием Nvidia, и мы хотим убедиться, что ROS 2 и Ignition хорошо работают на этих платформах», – сказал Брайан Герки, главный исполнительный директор Open Robotics. °.
«Нас больше всего волнуют две вещи: роботы и открытый исходный код. Это партнерство включает и то, и другое. Мы работаем вместе с Nvidia, чтобы улучшить опыт разработчиков для глобального сообщества робототехники, расширяя программное обеспечение с открытым исходным кодом, на которое полагаются робототехники. Мы рады работать напрямую с Nvidia и получать их поддержку по мере того, как мы расширяем наше программное обеспечение, чтобы максимально использовать преимущества их оборудования ».
Команда увидит, как Open Robotics работает над ROS для улучшения потока данных между различными процессорами – CPU, GPU, NVDLA и тензорными ядрами – на оборудовании Nvidia Jetson в качестве средства для ускорения обработки данных с высокой пропускной способностью.
В рамках этого моделирования среды моделирования Open Robotics ‘Ignition и Nvidia Isaac Sim должны получить возможность взаимодействия – это означает, что модели роботов и окружающей среды можно будет перемещать от одной к другой, по крайней мере, когда программное обеспечение будет завершено в начале следующего года.
Что касается того, почему портфель ускоренных вычислений Nvidia и, в частности, семейство встроенных продуктов Jetson, должно понравиться производителям роботов, Герки сказал: «Nvidia вложила значительные средства в вычислительное оборудование, которое актуально для современных рабочих нагрузок робототехники и ИИ. Роботы поглощают и обрабатывают большие объемы объемы данных от датчиков, таких как камеры и лазеры. Архитектура Nvidia позволяет этому потоку данных происходить невероятно эффективно ».
Мурали Гопалакришна, глава отдела управления продуктами Intelligent Machines в Nvidia, сказал о подключении: «Платформа Nvidia для вычислений с ускорением на GPU лежит в основе многих приложений для роботов искусственного интеллекта, и многие из них разрабатываются с использованием ROS, поэтому логично, что мы работаем в тесном сотрудничестве с открытой робототехникой для развития области робототехники.
Работа также включает в себя несколько новых Isaac GEM, пакетов с аппаратным ускорением для ROS, предназначенных для замены кода, который в противном случае работал бы на процессоре. Последние GEM включают пакеты для обработки стереоизображений и данных облаков точек, преобразования цветового пространства, коррекции искажения линз, а также обнаружения и обработки AprilTags – 2D-тегов в стиле QR-кода, разработанных в Мичиганском университете.
Однако партнерство не означает, что эти двое будут стабильными. «Мы стремимся аналогичным образом расширить ROS 2 на другое ускоренное оборудование», – сказал Герки о планируемой поддержке других устройств, таких как Myriad X от Intel и TPU от Google, не говоря уже об оборудовании GPU от AMD, конкурента Nvidia.
«Фактически, мы планируем работу, которую проводим вместе с Nvidia, чтобы заложить основу для дополнительных расширений для дополнительных архитектур. Другим производителям оборудования: свяжитесь с нами, чтобы обсудить расширения для вашей платформы!»
Последние версии Isaac GEM теперь доступны в репозитории Nvidia GitHub; Между тем, ожидается, что совместимые среды моделирования появятся не раньше весны 2022 года (в северном полушарии).
Гопалакришна из Nvidia сказал, что разработчики ROS могут начать экспериментировать до даты выпуска. «В симуляторе уже есть мост ROS 1 и ROS 2 и есть примеры использования многих популярных пакетов ROS для навигации (nav2) и манипуляции (MoveIT). Многие из этих разработчиков также используют Isaac Sim для генерации синтетических данных для обучения в их роботах. Наш весенний выпуск принесет дополнительные функции, такие как взаимодействие между Gazebo Ignition и Isaac Sim ».
Когда мы спросили, какого повышения производительности пользователи могут ожидать от новых Isaac GEM по сравнению с пакетами только для ЦП, нам ответили: «Величина прироста производительности будет зависеть от степени параллелизма, присущего данной рабочей нагрузке. Но мы можем сказать, что мы наблюдаем на порядок увеличение производительности для рабочих нагрузок, связанных с восприятием и ИИ. Используя соответствующий процессор для ускорения различных задач, мы видим повышение производительности и повышение энергоэффективности ».
Что касается дополнительных функций, находящихся на стадии разработки, Гопалакришна сказал: «Nvidia работает с Open Robotics, чтобы сделать структуру ROS более оптимизированной для аппаратного ускорения, и мы также продолжим выпускать несколько новых Isaac GEM, наши программные пакеты с аппаратным ускорением для ROS.
«Некоторые из них будут DNN, которые обычно используются в стеках восприятия робототехники. Что касается симулятора, мы работаем над добавлением поддержки для большего количества датчиков и роботов и выпускаем больше образцов, актуальных для сообщества ROS». ®
[ad_2]
