Những sáng kiến này sẽ giảm thời gian phát triển và cải thiện hiệu suất cho các nhà phát triển đang tìm cách kết hợp thị giác máy tính và chức năng AI / học máy vào các ứng dụng dựa trên ROS của họ.
Open Robotics sẽ nâng cao ROS 2 để cho phép quản lý hiệu quả luồng dữ liệu và bộ nhớ dùng chung trên GPU và các bộ xử lý khác có mặt trên nền tảng NVIDIA Jetson AI edge.
Điều này sẽ cải thiện đáng kể hiệu suất của các ứng dụng phải xử lý dữ liệu băng thông cao từ các cảm biến như camera và lidars trong thời gian thực.
Ngoài ra, Open Robotics và NVIDIA đang làm việc để kích hoạt khả năng tương tác mô phỏng liền mạch giữa Ignition Gazebo của Open Robotics và NVIDIA Isaac Sim trên Omniverse.
Isaac Sim đã hỗ trợ ROS 1 và 2 ngay từ đầu và có một hệ sinh thái nội dung 3D quan trọng với kết nối của nó với các ứng dụng phổ biến, chẳng hạn như Blender và Unreal Engine 4.
Ignition Gazebo mang lại một hồ sơ theo dõi kéo dài hàng thập kỷ về việc sử dụng rộng rãi trong cộng đồng người máy, bao gồm cả trong các sự kiện cạnh tranh nổi tiếng như Thử thách dưới lòng đất DARPA đang diễn ra.
Với hai trình mô phỏng được kết nối, các nhà phát triển ROS có thể dễ dàng di chuyển rô bốt và môi trường của họ giữa Ignition Gazebo và Isaac Sim để chạy mô phỏng quy mô lớn và tận dụng các tính năng nâng cao của từng trình mô phỏng như động lực học có độ trung thực cao, mô hình cảm biến chính xác và kết xuất ảnh thực để tạo dữ liệu tổng hợp để đào tạo và thử nghiệm các mô hình AI.
Phần mềm kết quả từ sự hợp tác này dự kiến sẽ được phát hành vào mùa xuân năm 2022. Isaac GEM được phát hành cho ROS (Gói tăng tốc đáng kể so với chỉ CPU) Isaac GEM cho ROS là gói tăng tốc phần cứng giúp các nhà phát triển ROS dễ dàng hơn trong việc xây dựng các giải pháp hiệu suất cao trên nền tảng Jetson.
Trọng tâm của các GEM này là cải thiện thông lượng xử lý hình ảnh và trên các mô hình nhận thức dựa trên DNN ngày càng có tầm quan trọng đối với các nhà chế tạo robot.
Các gói này giảm tải cho CPU chủ trong khi mang lại hiệu suất đáng kể. Isaac GEM mới dành cho ROS bao gồm: · Chênh lệch âm thanh nổi SGM và đám mây điểm · Chuyển đổi không gian màu và sửa méo ống kính · Phát hiện thẻ AprilTags.
Tải xuống Isaac GEMs cho ROS tại đây
Thông tin thêm về Isaac Sim tại đây
Hướng dẫn tạo dữ liệu tổng hợp với Isaac Sim tại đây
Thông tin thêm về Tăng tốc Đào tạo ML với Bộ công cụ TAO tại đây
NVIDIA Jetson & JetPack - chi tiết tại đây
NVIDIA DeepStream - chi tiết tại đây
Bộ chỉ huy Hạm đội NVIDIA - chi tiết tại đây
Máy chủ suy luận NVIDIA TRITON - chi tiết tại đây
NVIDIA RIVA - chi tiết tại đây