0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

使用NVIDIA Isaac ROS Developer Preview 3構(gòu)建高性能機(jī)器人應(yīng)用

NVIDIA英偉達(dá) ? 來源:NVIDIA英偉達(dá) ? 2023-05-10 11:46 ? 次閱讀

隨著自主性提升、傳感器數(shù)量與種類以及傳感器融合算法的日益增加,機(jī)器人正變得越來越復(fù)雜。為了運(yùn)行這些日益復(fù)雜的工作負(fù)載,必須利用硬件加速,使機(jī)器人應(yīng)用能夠以更快的速度和更高的效率運(yùn)行更大規(guī)模的工作負(fù)載。

NVIDIA Isaac ROS始終致力于為 ROS 開發(fā)者提供加速計(jì)算軟件包和工具,用以開發(fā)高性能且節(jié)能的機(jī)器人應(yīng)用。

NVIDIA 率先將加速計(jì)算納入了 ROS 2,并不斷改進(jìn)更新版本。在過去的兩年中,NVIDIA 已增加了 20 多個(gè)硬件加速 ROS 軟件包,支持最新發(fā)行的 ROS 2。

團(tuán)隊(duì)去年與 Open Robotics 一起,在提供硬件加速器的計(jì)算平臺上加入了適應(yīng)和類型協(xié)商以提高 ROS 的性能。他們還實(shí)現(xiàn)了用于 Isaac ROS 的適應(yīng)和類型協(xié)商——NITROS(NVIDIA Isaac Transport for ROS)。

最新發(fā)布的NVIDIA Isaac ROS Developer Preview 3(DP3)包括重要功能的更新和提升。

NVIDIA Isaac ROS Developer Preview 3

NVIDIA Isaac ROS DP3 加入了許多新的功能,讓 ROS 社區(qū)能夠從硬件加速中獲益,主要包括:用于自動定位機(jī)器人的新地圖定位器,帶有人類檢測功能的更新版 NvBlox、用于對 ROS 2 圖像進(jìn)行實(shí)際基準(zhǔn)測試的全新 ROS 2 基準(zhǔn)測試工具,以及開源 NITROS 軟件包。

不到半秒就能在地圖中自動定位

移動機(jī)器人(比如用于倉庫或服務(wù)的機(jī)器人等)在開始進(jìn)入空間之前,需要知道它們在地圖中的初始位姿。向機(jī)器人提供這種初始位姿信息的最常見方法是手動設(shè)置,不過這種方法不僅要在整個(gè)過程中增加人工干預(yù),還可能需要 30 秒以上的時(shí)間。

使用新的 Isaac ROS 地圖定位 ROS 軟件包,就不需要手動設(shè)置機(jī)器人的初始位置和方向。該軟件包使用激光雷達(dá)測距掃描,可在不到半秒的時(shí)間內(nèi)自動估計(jì)在所占網(wǎng)格地圖中的位姿。定位器可以與平面激光雷達(dá)或 3D 激光雷達(dá)同時(shí)工作,并且可用于初始化移動機(jī)器人的導(dǎo)航。

這個(gè) ROS 軟件包通過 GPU 加速并利用 NITROS 創(chuàng)建沒有通信開銷的高效 ROS 流程,已經(jīng)與 Nav2 集成。

34aebcb6-e6ab-11ed-ab56-dac502259ad0.gif

圖 NVIDIA Isaac ROS 地圖定位軟件包

在不到半秒的時(shí)間內(nèi)自動計(jì)算出初始全局位姿

移除三維重建中的人類

Isaac ROS NvBlox提供了一個(gè)用于三維重建的 GPU 加速軟件包,并利用傳感器觀測數(shù)據(jù)繪制了機(jī)器人周邊環(huán)境的代價(jià)地圖。這些都對路徑規(guī)劃器生成無碰撞路徑十分有用。

在人群中移動的機(jī)器人需要首先檢測到人類,然后根據(jù)與他們的接近程度選擇不同的路線。盡管人類應(yīng)該成為代價(jià)地圖的一部分(用來計(jì)算無碰撞路徑),但不應(yīng)該成為三維重建的一部分。三維重建應(yīng)該只包含靜態(tài)障礙物。

Isaac ROS DP3 版本所包含的 Isaac ROS NvBlox 軟件包更新版本可以檢測和劃分人類,并提供人類的代價(jià)地圖以避免發(fā)生碰撞。同樣,它還提供用于三維重建的靜態(tài)代價(jià)地圖,以避免與靜態(tài)物體發(fā)生碰撞。

圖 2Isaac ROS NvBlox 軟件包

在三維重建過程中檢測并移除人類

對 ROS 圖像進(jìn)行標(biāo)準(zhǔn)的基準(zhǔn)測試

對 ROS 圖像進(jìn)行的基準(zhǔn)測試應(yīng)反映出在實(shí)際工作負(fù)載下的性能。對整個(gè) ROS 圖像(而不是一個(gè)特定的 ROS 節(jié)點(diǎn))進(jìn)行基準(zhǔn)測試十分重要,該測試將包含 RCL 中指示實(shí)際性能的消息傳輸成本。

Isaac ROS DP3 包含 ROS 2 的開源基準(zhǔn)測試工具。該工具不需要通過修改節(jié)點(diǎn)來度量結(jié)果,而且可以將輸入的 rosbag 數(shù)據(jù)集標(biāo)準(zhǔn)化,以便對基準(zhǔn)結(jié)果進(jìn)行獨(dú)立驗(yàn)證。

該基準(zhǔn)測試工具采用行業(yè)最佳實(shí)踐,并專門為了測量實(shí)時(shí)機(jī)器人應(yīng)用中的節(jié)點(diǎn)圖吞吐量和延遲而進(jìn)行了專業(yè)強(qiáng)化。亮點(diǎn)包括:

可靠的結(jié)果:在多秒內(nèi)進(jìn)行 N 次(默認(rèn) N=5 )自動性能測試,舍棄結(jié)果的最小和最大值以減少誤差?;鶞?zhǔn)結(jié)果在日志文件中報(bào)告,以便導(dǎo)入用戶所選擇的可視化工具中。

輸入數(shù)據(jù)集:可在 CCv4.0 歸屬許可證下從NGC下載,r2b data set 2023為 rosbag 的圖像提供一致的輸入,并且用戶可根據(jù)需要添加額外的輸入數(shù)據(jù)。

輸入圖像分辨率:各種計(jì)算硬件可根據(jù)機(jī)器人應(yīng)用的不同以合適的分辨率處理圖像。

輸入和輸出傳輸時(shí)間:RCL 發(fā)布和接收進(jìn)程間和進(jìn)程內(nèi)消息的時(shí)間包含在測量結(jié)果中,能夠準(zhǔn)確表示機(jī)器人應(yīng)用中的預(yù)期情況,避免了去除消息傳遞成本后的夸大結(jié)果。

輸入和輸出類型自適應(yīng):使用標(biāo)準(zhǔn) ROS 類型輸入數(shù)據(jù)或者使用類型適應(yīng)和類型協(xié)商。

基準(zhǔn)參數(shù):用于測試的參數(shù)包括數(shù)據(jù)輸入長度、發(fā)布速率和輸入數(shù)據(jù)大小,并且可通過配置文件自定義。

吞吐量自動查找器:測量圖像的峰值吞吐量,在 topic 下降到 <1% 的情況下,要求自動找到圖像的峰值吞吐量。吞吐量自動查找器能夠高效查找峰值吞吐量的輸入數(shù)據(jù)發(fā)布速率。

實(shí)時(shí)延遲:根據(jù)固定的 topic 發(fā)布速率實(shí)時(shí)測量延遲。該數(shù)據(jù)顯示以預(yù)期的固定發(fā)布速率向?qū)崟r(shí)系統(tǒng)傳輸內(nèi)容,吞吐量會顯示機(jī)器人應(yīng)用可能的峰值性能。

云原生:測試可以作為自動化測試的一部分在 Kubernetes 上執(zhí)行,也可以作為現(xiàn)代軟件開發(fā)的一部分在 CI/CD 每日夜間測試中執(zhí)行。也可以在本地開發(fā)者系統(tǒng)上進(jìn)行測試。

黑盒測試:在基準(zhǔn)測試中直接使用所有性能測量工具,將節(jié)點(diǎn)圖像作為二進(jìn)制文件進(jìn)行測試。這期間不會修改被測試的圖像中的代碼,并且可以用相同的工具以一種自然的方式進(jìn)行包含從開源到專有解決方案的性能測試。

透明性:JSON 中的結(jié)果包含用于運(yùn)行基準(zhǔn)測試的參數(shù),包括用于獨(dú)立結(jié)果驗(yàn)證的輸入 rosbag 的 MD5 算法的數(shù)據(jù)。

支持 NVIDIA Jetson 新增平臺

Isaac ROS DP3 增加了對 NVIDIA Jetson 系列最新產(chǎn)品NVIDIA Jetson Orin Nano和NVIDIA Jetson Orin NX的支持。它還支持新發(fā)布的NVIDIA Jetson Orin Nano 開發(fā)者套件。所有 Jetson Orin 和Xavier系列的模塊和開發(fā)者套件均支持 Isaac ROS。

支持 Jetson Orin 系列的模塊和開發(fā)者套件

新版本還增加了對新發(fā)布的NVIDIA Ada Lovelacearchitecture和NVIDIA GeForce RTX 40 GPU的支持。

從此更新版本開始,NITROS 加速的 Isaac ROS 軟件包中的大部分內(nèi)容均已開源。作為 ROS 開發(fā)者,您現(xiàn)在可以擴(kuò)展這些軟件包、解決您遇到的任何問題并向 Isaac ROS 社區(qū)投稿。

總結(jié)

NVIDIA Isaac ROS Developer Preview 3 是一項(xiàng)重大更新,讓 ROS 社區(qū)能夠從硬件加速中獲益,從而更輕松地構(gòu)建高性能節(jié)能機(jī)器人應(yīng)用。該版本的亮點(diǎn)主要包括:可對 ROS 2 圖像進(jìn)行實(shí)際基準(zhǔn)測試的全新 ROS 2 基準(zhǔn)測試工具;可對機(jī)器人進(jìn)行自動定位的全新地圖定位器;開源的 NITROS 軟件包;以及帶有人類檢測功能的更新版 NvBlox。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2545

    文章

    50453

    瀏覽量

    751100
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    210

    文章

    28108

    瀏覽量

    205860
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    4856

    瀏覽量

    102711
  • ROS
    ROS
    +關(guān)注

    關(guān)注

    1

    文章

    276

    瀏覽量

    16942

原文標(biāo)題:使用 NVIDIA Isaac ROS Developer Preview 3 構(gòu)建高性能機(jī)器人應(yīng)用

文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    利用NVIDIA Isaac平臺構(gòu)建、設(shè)計(jì)并部署機(jī)器人應(yīng)用

    任務(wù)等功能。 AI 在這一變革中發(fā)揮著關(guān)鍵作用,提高了機(jī)器人性能。通過集成 NVIDIA AI 加速,機(jī)器人可以更高的精度和效率處理復(fù)雜的任務(wù),在各種應(yīng)用中充分發(fā)揮自己的潛力。
    的頭像 發(fā)表于 11-09 11:41 ?323次閱讀
    利用<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b>平臺<b class='flag-5'>構(gòu)建</b>、設(shè)計(jì)并部署<b class='flag-5'>機(jī)器人</b>應(yīng)用

    NVIDIA與學(xué)術(shù)研究人員聯(lián)合開發(fā)手術(shù)機(jī)器人

    利用 NVIDIA Isaac Sim 和 NVIDIA Omniverse 開發(fā)的 ORBIT-Surgical 正在 ICRA 機(jī)器人大會上展出。
    的頭像 發(fā)表于 10-10 10:00 ?305次閱讀

    NVIDIA提供一套服務(wù)、模型以及計(jì)算平臺 加速人形機(jī)器人發(fā)展

    開發(fā)者可以訪問新的 NVIDIA NIM 微服務(wù),用于 Isaac Lab 和 Isaac Sim 中的機(jī)器人仿真、OSMO 機(jī)器人云計(jì)算編
    的頭像 發(fā)表于 07-31 10:41 ?594次閱讀

    NVIDIA 加速人形機(jī)器人發(fā)展

    開發(fā)者可以訪問新的 NVIDIA NIM 微服務(wù),用于 Isaac Lab 和 Isaac Sim 中的機(jī)器人仿真、OSMO 機(jī)器人云計(jì)算編
    發(fā)表于 07-30 09:15 ?705次閱讀
    <b class='flag-5'>NVIDIA</b> 加速人形<b class='flag-5'>機(jī)器人</b>發(fā)展

    ROS機(jī)器人開發(fā)更便捷,基于RK3568J+Debian系統(tǒng)發(fā)布!

    本帖最后由 Tronlong創(chuàng)龍科技 于 2024-7-19 17:18 編輯 ROS系統(tǒng)是什么 ROS(Robot Operating System)是一個(gè)適用于機(jī)器人的開源的元操作系統(tǒng)。它
    發(fā)表于 07-09 11:38

    逐際動力攜手英偉達(dá)Isaac平臺, 助力通用機(jī)器人研發(fā)

    在近日舉行的年度計(jì)算機(jī)視覺與模式識別會議(CVPR)上,英偉達(dá)發(fā)布了其最新版本的NVIDIA Isaac Sim。與此同時(shí),逐際動力也宣布將采用這一升級版的Isaac平臺,以強(qiáng)化學(xué)習(xí)和提升通用
    的頭像 發(fā)表于 06-21 09:34 ?2316次閱讀

    NVIDIA Isaac 機(jī)器人平臺利用最新的生成式 AI 和先進(jìn)的仿真技術(shù),加速 AI 機(jī)器人技術(shù)的發(fā)展

    NVIDIA 發(fā)布了 Isaac Manipulator 和 Isaac Perceptor 等一系列基礎(chǔ)模型、機(jī)器人工具和 GPU 加速庫。 NV
    的頭像 發(fā)表于 06-04 18:00 ?7613次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>機(jī)器人</b>平臺利用最新的生成式 AI 和先進(jìn)的仿真技術(shù),加速 AI <b class='flag-5'>機(jī)器人</b>技術(shù)的發(fā)展

    全球機(jī)器人開發(fā)領(lǐng)域采用NVIDIA 機(jī)器人開發(fā)和生產(chǎn)

    比亞迪電子、西門子、泰瑞達(dá)和 Alphabet 旗下公司 Intrinsic 采用 NVIDIA Isaac 機(jī)器人平臺開發(fā)自主機(jī)械臂、人形機(jī)器人和移動
    的頭像 發(fā)表于 06-03 18:25 ?1161次閱讀

    使用NVIDIA Isaac Manipulator生成抓取姿勢和機(jī)器人運(yùn)動

    NVIDIA 宣布與 Intrinsic.ai 就工業(yè)機(jī)器人任務(wù)的基礎(chǔ)技能模型學(xué)習(xí)展開合作。
    的頭像 發(fā)表于 05-17 10:33 ?1026次閱讀
    使用<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> Manipulator生成抓取姿勢和<b class='flag-5'>機(jī)器人</b>運(yùn)動

    NVIDIA Isaac機(jī)器人平臺升級,加速AI機(jī)器人技術(shù)革新

    NVIDIA Isaac機(jī)器人平臺近期實(shí)現(xiàn)重大升級,通過引入最新的生成式AI技術(shù)和先進(jìn)的仿真技術(shù),顯著加速了AI機(jī)器人技術(shù)的發(fā)展步伐。該平臺正不斷擴(kuò)展其基礎(chǔ)模型、
    的頭像 發(fā)表于 03-27 10:36 ?611次閱讀

    NVIDIA入局人形機(jī)器人!Isaac平臺迎來重要更新

    NVIDIA Isaac 機(jī)器人平臺利用最新的生成式 AI 和先進(jìn)的仿真技術(shù),加速 AI 機(jī)器人技術(shù)的發(fā)展。
    的頭像 發(fā)表于 03-26 09:07 ?964次閱讀
    <b class='flag-5'>NVIDIA</b>入局人形<b class='flag-5'>機(jī)器人</b>!<b class='flag-5'>Isaac</b>平臺迎來重要更新

    NVIDIA Isaac將生成式AI應(yīng)用于制造業(yè)和物流業(yè)

    NVIDIA Isaac 機(jī)器人平臺利用最新的生成式 AI 和先進(jìn)的仿真技術(shù),加速 AI 機(jī)器人技術(shù)的發(fā)展。
    的頭像 發(fā)表于 03-22 10:06 ?481次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b>將生成式AI應(yīng)用于制造業(yè)和物流業(yè)

    使用 NVIDIA Isaac 仿真并定位 Husky 機(jī)器人

    了 ZED 2 攝像頭。駕駛 Husky 機(jī)器人使用的是 Isaac ROS 2 的最新版本,其中包括用于機(jī)器人定位(NVIDIA
    的頭像 發(fā)表于 12-26 18:05 ?1197次閱讀
    使用 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> 仿真并定位 Husky <b class='flag-5'>機(jī)器人</b>

    利用 NVIDIA Isaac Transport for ROS 提升自定義 ROS 圖形性能

    NVIDIA Isaac Transport for ROS(NITROS) 是隨 ROS 2 Humble 加入的兩項(xiàng)硬件加速功能——類型適配和類型協(xié)商。 類型適配 使
    的頭像 發(fā)表于 11-30 19:35 ?571次閱讀
    利用 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> Transport for <b class='flag-5'>ROS</b> 提升自定義 <b class='flag-5'>ROS</b> 圖形<b class='flag-5'>性能</b>

    ROS機(jī)器人開發(fā)更便捷,基于RK3568J+Debian系統(tǒng)發(fā)布!

    。 (3) 支持實(shí)時(shí)控制與通信,數(shù)據(jù)安全可靠如今ROS系統(tǒng)支持實(shí)時(shí)控制與通信,并且數(shù)據(jù)安全可靠?!皩?shí)時(shí)性”、“安全性”是如今工業(yè)自動化行業(yè)的普遍追求,特別是對于AGV開發(fā),若AGV機(jī)器人的主控制器、雷達(dá)
    發(fā)表于 11-30 16:01