在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

全新ROS 2 Humble硬件加速特性

NVIDIA英偉達企業解決方案 ? 來源:NVIDIA英偉達企業解決方案 ? 作者:NVIDIA英偉達企業解 ? 2022-07-07 09:45 ? 次閱讀

自 2021 年 10 月起,NVIDIA 和 Open Robotics 開始合作并推出了兩項重要的改動,現已發布在Humble ROS 2版本中,以提高提供硬件加速器的計算平臺的性能。

新的 ROS 2 Humble 硬件加速特性包括類型適配和類型協商。NVIDIA 已于 2022 年 6 月底發布 NVIDIA Isaac ROS 并推出一個實現類型適配和類型協商的軟件包。

這些對框架的補充雖然簡單,但功能強大,并且能夠顯著提高性能。開發人員希望將 AI / 機器學習計算機視覺功能納入其基于 ROS 的應用程序中。

Open Robotics 首席執行官 Brian Gerkey 表示:“隨著 ROS 開發人員向其機器人應用程序添加更多的自主權,機器人上的計算機正變得更加強大。我們一直在努力改進 ROS 框架,以確保它能夠利用這些邊緣計算機中的高性能硬件資源。”。

“我們與 NVIDIA 機器人團隊密切合作,并且很高興在 Humble 版本中分享新功能(類型適配和類型協商),這將有助于整個 ROS 社區去接受硬件加速。”

消除硬件加速的開銷

類型適配

硬件加速器通常需要不同的數據格式來提供最佳性能。類型適配(REP-2007)現在可用于 ROS 節點,使其以更適合硬件的格式工作。處理管道可以使用自適應類型消除 CPU 和內存加速器之間的內存拷貝。不必要的內存拷貝會消耗 CPU 計算、浪費電力并降低性能,尤其是隨著圖像大小的增加。

類型協商

另一個新的創新是類型協商(REP-2009)。處理管道中的不同 ROS 節點可以公布其支持的類型,以便選擇產生理想性能的格式。ROS 框架執行此協商過程,并與不支持協商的遺留節點保持兼容性。

使用類型適配和協商加速處理管道,讓硬件加速器零拷貝成為可能。這減少了軟件開銷,并釋放了底層硬件的潛力。隨著機器人專家向 NVIDIA Jetson AGX Orin 等更強大的平臺遷移,他們可以期望實現更多硬件性能的提升。

這些改動完全在 ROS 2 內部完成,這確保了與現有工具、工作流和代碼庫的兼容性。

類型適配和類型協商已顯示出有希望的結果。在 ROS 2 Foxy 和 ROS 2 Humble 上運行了一個由 ROS 節點圖組成的基準測試,每個節點的計算量最小,因此我們可以觀察到底層框架的性能。我們在NVIDIAJetson AGX Xavier和新的NVIDIA Jetson AGX Orin運行了這一基準測試,我們觀察到 NVIDIA Jetson AGX Xavier 有 3 倍的提高,而 NVIDIA Jetson AGX Orin 有驚人的7 倍提高。

引入NVIDIA Issac用于ROS傳輸

NVIDIA 對類型適配和協商的實現稱為NITROS。這些是由 Isaac ROS 硬件加速模塊(又稱為 GEMs)組成的 ROS 處理管道。這些管道在 Isaac ROS 開發者預覽(DP)中提供,并且已于 2022 年 6 月底發布。NITROS 的首次發布將包括三條管道,計劃在今年晚些時候推出更多管道。

強大的新型GEMs輔助機器人感知

除了 NITROS 加速管道外,IsaacROS DP 版本還包含兩個新的基于 DNN 的 GEM,旨在幫助機器人專家完成常見的感知任務。

第一個 GEM——ESS是用于立體相機視差預測的 DNN。該網絡為機器人應用提供基于視覺的連續深度感知。

另一個 GEM——Bi3D是用于基于視覺的障礙預測的 DNN 。基于 NVIDIA Research 的開創性工作,對 DNN 進行了改進,以檢測自由空間,同時預測障礙物。該網絡可預測障礙物是否位于立體攝像頭的四個可編程鄰近區域之一。

Bi3D 經過優化,可在 NVIDIADLA 硬件上運行。利用 DLA,可以同時保留 GPU 和 CPU 計算資源。

Bi3D 和 ESS 都經過預訓練,可應用于使用合成和真實數據的機器人,并擬用于商業用途。這兩款新的Isaac ROS GEM加入了stereo_image_proc,這是此前發布的經典計算機視覺立體深度視差程序,為立體相機深度感知提供了三種不同的、獨立的功能。

快速入門

ROS 開發人員若有興趣將 NVIDIA AI 感知集成到其產品中,可以從今天開始使用 Isaac ROS。

審核編輯:湯梓紅

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 加速器
    +關注

    關注

    2

    文章

    824

    瀏覽量

    38949
  • NVIDIA
    +關注

    關注

    14

    文章

    5258

    瀏覽量

    105849
  • ROS
    ROS
    +關注

    關注

    1

    文章

    285

    瀏覽量

    17585

原文標題:通過NVIDIA Isaac ROS傳輸改善ROS 2應用的感知性能

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦
    熱點推薦

    推動硬件輔助驗證平臺增長的關鍵因素

    硬件加速和基于FPGA的原型設計誕生于1980年代中期,開發者將當時初露頭角的現場可編程門陣列(FPGA)率先應用于硅前設計的原型驗證,由此催生了一種全新的驗證工具,打破了軟件仿真的主導局面。
    的頭像 發表于 06-11 14:42 ?185次閱讀
    推動<b class='flag-5'>硬件</b>輔助驗證平臺增長的關鍵因素

    ros2教程

    電子發燒友網站提供《ros2教程.pdf》資料免費下載
    發表于 05-23 09:12 ?0次下載

    【「# ROS 2智能機器人開發實踐」閱讀體驗】視覺實現的基礎算法的應用

    。 學習建議 對于初學者,建議先通過仿真(如Gazebo)驗證算法,再遷移到真實機器人,以降低硬件調試成本。 多參與開源社區(如ROS2的GitHub項目),學習前沿技術并貢獻代碼,是快速提升實戰能力
    發表于 05-03 19:41

    【「# ROS 2智能機器人開發實踐」閱讀體驗】+ROS2應用案例

    的應用。書中詳細介紹了如何在ROS 2中實現二維碼識別,包括二維碼掃描庫Zbar的使用,以及如何通過相機識別二維碼。 通過學習這一部分,我了解到二維碼識別的基本原理和實現步驟。首先,需要通過相機獲取環境圖像
    發表于 04-27 11:42

    【「# ROS 2智能機器人開發實踐」閱讀體驗】+內容初識

    應用案例:書中提供了多個機器人應用案例,幫助讀者將所學的 ROS 2 知識應用到實際的機器人項目中。例如,在自主移動機器人案例中,詳細講解了如何實現機器人的自主導航、避障、任務執行等功能,包括硬件選型
    發表于 04-27 11:24

    TPU處理器的特性和工作原理

    張量處理單元(TPU,Tensor Processing Unit)是一種專門為深度學習應用設計的硬件加速器。它的開發源于對人工智能(AI)和機器學習應用的需求,尤其是深度學習中的神經網絡計算。
    的頭像 發表于 04-22 09:41 ?989次閱讀
    TPU處理器的<b class='flag-5'>特性</b>和工作原理

    2D圖形渲染緩慢怎么加快?

    到 glReadPixels (慢!):沒有可用的 GL 實現” 搜索表明這可能是因為未啟用硬件加速。 有誰知道如何檢查是否啟用了硬件加速?或者,如果我可能缺少一些應該包含的 Yocto 軟件包? 謝謝。
    發表于 04-02 06:46

    名單公布!【書籍評測活動NO.58】ROS 2智能機器人開發實踐

    的問題也逐漸暴露,為了能夠設計一款適用于所有機器人的操作系統,全新ROS——ROS 2在2017年年底正式發布。 又歷經多年迭代,終于在2022年5月底,
    發表于 03-03 14:18

    數據中心中的FPGA硬件加速

    ? 再來看一篇FPGA的綜述,我們都知道微軟包括國內的云廠商其實都在數據中心的服務器中部署了FPGA,所以這篇論文就以數據中心的視角,來看下FPGA這個硬件加速器。 還是一樣,想要論文原文的可以私信
    的頭像 發表于 01-14 10:29 ?544次閱讀
    數據中心中的FPGA<b class='flag-5'>硬件加速</b>器

    支持5點手寫硬件加速視頻演示-VS680與智慧教室解決方案

    硬件
    深蕾半導體
    發布于 :2024年12月03日 16:01:19

    基于Xilinx XCKU115的半高PCIe x8 硬件加速

    基于Xilinx XCKU115的半高PCIe x8 硬件加速卡,支持2x72bit(數據位寬64bit+ECC)DDR4存儲,數據傳輸速率 2400Mb/s。DDR4單簇容量4GB,兩組總容量為8GB
    的頭像 發表于 11-14 11:30 ?694次閱讀
    基于Xilinx XCKU115的半高PCIe x8 <b class='flag-5'>硬件加速</b>卡

    RISC-V跑AI算法能加速嗎?

    現在好多ARM單片機都帶機器學習加速,RISC-V有這方面的硬件加速嗎?
    發表于 10-10 22:14

    TDA4VM上的硬件加速運動恢復結構算法

    電子發燒友網站提供《TDA4VM上的硬件加速運動恢復結構算法.pdf》資料免費下載
    發表于 09-24 11:39 ?0次下載
    TDA4VM上的<b class='flag-5'>硬件加速</b>運動恢復結構算法

    AM62A SoC通過硬件加速視覺處理改進條形碼讀取器

    電子發燒友網站提供《AM62A SoC通過硬件加速視覺處理改進條形碼讀取器.pdf》資料免費下載
    發表于 09-04 09:52 ?0次下載
    AM62A SoC通過<b class='flag-5'>硬件加速</b>視覺處理改進條形碼讀取器

    適用于數據中心應用中的硬件加速器的直流/直流轉換器解決方案

    電子發燒友網站提供《適用于數據中心應用中的硬件加速器的直流/直流轉換器解決方案.pdf》資料免費下載
    發表于 08-26 09:38 ?0次下載
    適用于數據中心應用中的<b class='flag-5'>硬件加速</b>器的直流/直流轉換器解決方案
    主站蜘蛛池模板: 成人欧美一区二区三区白人 | 色咯咯| 天天色天天搞 | 九色视频在线播放 | 插久久| 色两性网欧美 | 欧美黑人巨大日本人又爽又色 | 天堂网在线www资源网 | 在线观看黄色的网站 | 国产一区二区三区美女在线观看 | 免费看黄色录像 | 国产大片91精品免费观看不卡 | 九九99久久精品午夜剧场免费 | 91大神精品长腿在线观看网站 | 免费观看黄视频网站 | 丁香花五月天婷婷 | video另类蛇交 | 欧美成人亚洲欧美成人 | 老湿影院免费体验区 | 欧美性生活网站 | 国产精品嫩草影院一二三区 | 免费一区在线观看 | 不卡中文字幕在线 | 国产福利在线观看一区二区 | 欧美h网| 色99视频| 国产色系视频在线观看免费 | 全国男人的天堂网站 | 欧美成人黄色 | 最新欧美精品一区二区三区 | 欧美在线不卡视频 | 国产日韩精品欧美一区色 | 国产在线观看黄 | 综合伊人久久 | 日本大片免aaa费观看视频 | 综合欧美一区二区三区 | 天天拍天天干 | 性欧美性| 欧美性久久 | 91精品国产色综合久久不卡蜜 | 国产亚洲婷婷香蕉久久精品 |