0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI自動(dòng)生成機(jī)器人控制代碼,新的藍(lán)海賽道已經(jīng)顯現(xiàn)

E4Life ? 來源:電子發(fā)燒友網(wǎng)原創(chuàng) ? 作者:周凱揚(yáng) ? 2023-10-06 08:55 ? 次閱讀
電子發(fā)燒友網(wǎng)報(bào)道(文/周凱揚(yáng))作為最考驗(yàn)場景適用度和成本控制的應(yīng)用之一,機(jī)器人市場在隨著進(jìn)一步接入高性能AI芯片,再度開啟了新的藍(lán)海賽道。比如人形機(jī)器人已經(jīng)有了接入大語言模型的趨勢(shì),我們也已經(jīng)在不少行業(yè)展會(huì)上看到了類似的demo。

機(jī)器人市場的白刃戰(zhàn)已經(jīng)不再僅僅是運(yùn)動(dòng)控制系統(tǒng)和視覺感知系統(tǒng)的比拼了,誰能在新時(shí)代把握AI算力的紅利,就有可能率先搶下這一藍(lán)海市場的第一塊蛋糕。而賦予這一紅利的前提,恰恰就是機(jī)器人AI芯片以及相關(guān)的軟件開發(fā)平臺(tái)。

接入大語言模型,AI自動(dòng)生成代碼

作為AI芯片領(lǐng)域的龍頭,英偉達(dá)的Jetson AGX Orin在去年一經(jīng)發(fā)布,就獲得了機(jī)器人行業(yè)生態(tài)的追捧。200TOPS@INT8的算力相比上一代的Jetson Nano、Jetson Xavier都有了數(shù)倍的提升。而上一代產(chǎn)品仍是當(dāng)時(shí)乃至現(xiàn)在的主流產(chǎn)品,Jetson的開發(fā)生態(tài)擁有100萬開發(fā)者和6000多家公司,小米的Cyberone、宇樹的B1等產(chǎn)品都在使用Jetson硬件作為感知計(jì)算平臺(tái)。

不過Jetson AGX Orin面向的依然是行業(yè)級(jí)的市場,面對(duì)消費(fèi)級(jí)的產(chǎn)品,仍需要入門級(jí)與中端級(jí)的產(chǎn)品來替代原先的Nano和Xavier。因此英偉達(dá)隨即又發(fā)布了全新的Jetson Orin Nano和Jetson Orin NX,根據(jù)配置不同,最高算力分別可至40TOPS和100TOPS。

與Jetson AGX Orin一同更新的Metropolis、Omniverse Isaac和TAO的工具套件,進(jìn)一步減少了AI部署所需的時(shí)間成本,又能解決感知、自然語言理解等機(jī)器人開發(fā)過程中的挑戰(zhàn)。自去年第四季度英偉達(dá)開始供貨以來,今年新發(fā)布的一眾機(jī)器人產(chǎn)品紛紛用上了這顆芯片,而其作用也不再只是用于感知計(jì)算。

以國產(chǎn)機(jī)器人廠商宇樹為例,他們發(fā)布的Unitree Go2 EDU版本可以選配英偉達(dá)Jetson Orin高算力模組,以提供額外的40到100TOPS算力,結(jié)合來看選配的最低是8GB的Jetson Orin Nano,以及16GB的Jetson Orin NX。Unitree Go2也接入了GPT,在與人進(jìn)行問答交互時(shí)也更加智能,并非程序式的反應(yīng)。

這對(duì)于陪伴型機(jī)器人來說,或許意味著跨世代的進(jìn)步,在接入GPT后,一切交互活動(dòng)都會(huì)變得人性化。在理解指令語義后,也能通過GPT的代碼生成能力自動(dòng)生成機(jī)器人的控制代碼,從而在無需額外編程的情況下,觸發(fā)更為復(fù)雜的動(dòng)作指令。而目前Jetson是接入大模型最為全面的機(jī)器人硬件平臺(tái),故而為國產(chǎn)機(jī)器人廠商結(jié)合國產(chǎn)大模型也提供了支持。

AI定制化需求與開發(fā)平臺(tái)易用性

地平線雖是國產(chǎn)自動(dòng)駕駛芯片的龍頭廠商,但這家名字里帶了Robotics的公司,也在穩(wěn)步推進(jìn)著機(jī)器人的開發(fā)。在去年,地平線推出了國內(nèi)首個(gè)軟硬一體的機(jī)器人開發(fā)平臺(tái)Horizon Hobot Platform,以及基于最新旭日X3芯片打造的旭日X3派開發(fā)板。

Hobot平臺(tái)除了包括旭日3芯片外,還包括機(jī)器人操作系統(tǒng)TogetherROS,機(jī)器人參考算法Boxs等。旭日3集成了全新的伯努利2.0 BPU架構(gòu),可以提供5TOPS的算力。而TogetherROS在兼容ROS2通用操作系統(tǒng)的同時(shí),對(duì)旭日芯片進(jìn)行了底層優(yōu)化,提高了部分CV算子的性能。除了與傳感器和軟件廠商達(dá)成合作以外,地平線也與不少機(jī)器人本體廠商緊密合作,諸如松靈機(jī)器人、智科特機(jī)器人等。

而今年地平線推出了全新的RDK系列機(jī)器人開發(fā)者套件,基于此原先的旭日X3派升級(jí)成了RDK X3,上半年也發(fā)布了集成度更高的RDK X3模組,四核Cortex-A53的CPU主頻升級(jí)至1.5GHz,可以滿足機(jī)器人開發(fā)者客戶更多的定制化需求。

而在7月的地平線2023機(jī)器人開發(fā)者創(chuàng)享日上,地平線又發(fā)布了RDK X3 2.0以及RDK Ultra。RDK Ultra則是地平線為機(jī)器人開發(fā)準(zhǔn)備的一套高性能、大算力套件,其端側(cè)推理算力可達(dá)96TOPS,同時(shí)配備了8核Cortex-A55 CPU提供高性能處理能力。同時(shí)為了更好地降低開發(fā)者的適配與學(xué)習(xí)成本,RDK Ultra的硬件接口甚至兼容Jetson Orin系列開發(fā)板。

與此同時(shí),基于下一代芯片旭日5的RDK X5套件也已經(jīng)在開發(fā)過程中了,預(yù)計(jì)將于2024年面世。地平線也透露了該平臺(tái)的一些性能指標(biāo),比如8TOPS的BPU算力,8核Cortex A55的CPU將主頻進(jìn)一步提升至1.8GHz,且這次更是配備了Arm Mali GPU。

在機(jī)器人開發(fā)者創(chuàng)享日上,同樣獲得升級(jí)的還有TogetherROS。升級(jí)到2.0版本的TogetherROS引入了更多的算法與應(yīng)用實(shí)例,其中包括了一眾因?yàn)樗懔ι?jí)而得以實(shí)現(xiàn)的復(fù)雜算法,比如BEV視覺3D感知、深度學(xué)習(xí)視覺巡線等等。

為了對(duì)機(jī)器人應(yīng)用進(jìn)行更有針對(duì)性的開發(fā),地平線也推出了Node Hub,通過將SLAM、目標(biāo)檢測、定位和自主導(dǎo)航等功能節(jié)點(diǎn)化,從而使得不同類型的機(jī)器人只需將這些節(jié)點(diǎn)串聯(lián)起來即可完成應(yīng)用開發(fā),譬如需要SLAM、自主導(dǎo)航和運(yùn)動(dòng)控制的物流機(jī)器人,或是需要運(yùn)動(dòng)規(guī)劃和目標(biāo)檢測的分揀機(jī)器人等等。

AI計(jì)算的同時(shí)兼顧可靠性與實(shí)時(shí)性

另一個(gè)常常被大家忽略的硬件平臺(tái),同樣可以助力AI機(jī)器人的開發(fā),那就是AMD/賽靈思的Versal AI Edge系列。該系列通過標(biāo)量引擎、自適應(yīng)引擎和智能引擎的結(jié)合,提供了一個(gè)比GPU提供更高AI能耗比的平臺(tái)。在通用的控制嵌入式計(jì)算上,雙核Cortex-A72和雙核Cortex-R5F足以滿足Linux應(yīng)用和實(shí)時(shí)控制的需求,而自適應(yīng)引擎則用于支持各種傳感器的融合算法。

其智能引擎由AI引擎和DSP引擎構(gòu)成,每個(gè)AI引擎都由多個(gè)引擎塊構(gòu)成2D陣列,而每個(gè)引擎塊都包含了一個(gè)VLIW的單指令多數(shù)據(jù)向量處理器,主頻高達(dá)1.3GHz,且專門針對(duì)機(jī)器學(xué)習(xí)和高級(jí)信號(hào)處理進(jìn)行了優(yōu)化,足以滿足機(jī)器人實(shí)時(shí)控制的低時(shí)延。

值得一提的是,AMD提供的這一AI引擎分為兩種,一種是同時(shí)平衡ML和DSP負(fù)載的AIE引擎,一種是專注于ML的AIE-ML引擎,前者的高級(jí)信號(hào)處理能力更高,而后者的機(jī)器學(xué)習(xí)推理性能更高。這也是為何Versal AI Edge在智能引擎中加入了一個(gè)獨(dú)立的DSP引擎,這樣一來無論是機(jī)器人AI應(yīng)用中的深度學(xué)習(xí),還是感知計(jì)算中的信號(hào)處理,都能在單一平臺(tái)上完成。

不過從用例來看,Versal AI Edge系列還是更適合用于行業(yè)級(jí)的機(jī)器人,諸如工業(yè)協(xié)作機(jī)器人、醫(yī)用手術(shù)機(jī)器人等等。這類應(yīng)用往往需要數(shù)量大于消費(fèi)級(jí)機(jī)器人的異構(gòu)傳感器輸入,且對(duì)于預(yù)測性維護(hù)、遠(yuǎn)程診斷之類的機(jī)器學(xué)習(xí)應(yīng)用需求更高。況且從其標(biāo)量引擎的配置和自適應(yīng)引擎對(duì)TSN網(wǎng)絡(luò)的支持上來看,也是為了在工業(yè)、醫(yī)療等環(huán)境中實(shí)現(xiàn)ROS下最快的響應(yīng)速度。

寫在最后

對(duì)于機(jī)器人市場來說,追求小型化、低功耗、高算力的AI計(jì)算芯片必然是未來幾年的大勢(shì)所趨。與之匹配的電機(jī)/電機(jī)控制芯片以及傳感器,也已經(jīng)開啟了新一輪的技術(shù)升級(jí),目標(biāo)即形成感知層、計(jì)算層和執(zhí)行層的完美融合。單從技術(shù)積累來看,自動(dòng)駕駛芯片廠商很有可能是率先吃到甜頭的廠商,但它們不少仍需要更多的精力來接入不同的AI模型,才能跟上新的交互潮流。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    210

    文章

    28102

    瀏覽量

    205842
  • 英偉達(dá)
    +關(guān)注

    關(guān)注

    22

    文章

    3720

    瀏覽量

    90675
  • AI芯片
    +關(guān)注

    關(guān)注

    17

    文章

    1850

    瀏覽量

    34847
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    工業(yè)機(jī)器人常用的編程方式

    機(jī)器人完成特定的任務(wù)。編程可以手動(dòng)完成,也可以通過計(jì)算機(jī)輔助設(shè)計(jì)(CAD)軟件自動(dòng)生成。編程方式的選擇取決于任務(wù)的復(fù)雜性、機(jī)器人的類型、以及所需的靈活性和效率。 1. 手動(dòng)編程 1.1
    的頭像 發(fā)表于 09-04 09:26 ?521次閱讀

    STAR AI進(jìn)軍美股科技星智能領(lǐng)跑生成AI賽道

    自ChatGPT問世以來,從文字chatbot到視頻生成機(jī)器人,生成式人工智能(Generative AI)的商業(yè)應(yīng)用已經(jīng)成為全球最具爆炸
    的頭像 發(fā)表于 08-22 08:56 ?249次閱讀
    STAR <b class='flag-5'>AI</b>進(jìn)軍美股科技星智能領(lǐng)跑<b class='flag-5'>生成</b>式<b class='flag-5'>AI</b><b class='flag-5'>賽道</b>

    Al大模型機(jī)器人

    理解能力強(qiáng)大: AI大模型機(jī)器人可以理解和生成自然語言,能夠進(jìn)行復(fù)雜的對(duì)話和語言任務(wù)。它們能夠識(shí)別語言中的語義、語境和情感,并據(jù)此作出適當(dāng)?shù)幕貞?yīng)。廣泛的知識(shí)儲(chǔ)備: 這些模型基于大規(guī)模的數(shù)據(jù)集進(jìn)行訓(xùn)練,擁有
    發(fā)表于 07-05 08:52

    如何使用PLC控制機(jī)器人

    隨著工業(yè)自動(dòng)化技術(shù)的飛速發(fā)展,機(jī)器人技術(shù)作為其中的重要組成部分,其應(yīng)用范圍日益廣泛。在機(jī)器人控制系統(tǒng)中,PLC(Programmable Logic Controller,可編程邏輯
    的頭像 發(fā)表于 06-17 10:50 ?1381次閱讀

    基于FPGA EtherCAT的六自由度機(jī)器人視覺伺服控制設(shè)計(jì)

    ,為工業(yè)自動(dòng)化提供了一套切實(shí)可行的方案。 本文針對(duì)基于機(jī)器視覺的工業(yè)機(jī)器人進(jìn)行研究,主要工作包括以下幾點(diǎn): (1)設(shè)計(jì)了基于 伊瑟特的六自由度機(jī)器人視覺伺服
    發(fā)表于 05-29 16:17

    臺(tái)廠全面進(jìn)軍全球AI人形機(jī)器人市場

    隨著英偉達(dá)新平臺(tái)的發(fā)布,AI人形機(jī)器人不再是夢(mèng)想。臺(tái)資企業(yè)也緊跟步伐,積極布局這一新興市場。其中,鴻集團(tuán)在“3+3”戰(zhàn)略中,重點(diǎn)關(guān)注電動(dòng)汽車、數(shù)字健康以及機(jī)器人三個(gè)未來趨勢(shì)行業(yè),充分
    的頭像 發(fā)表于 05-27 10:08 ?489次閱讀

    軟銀集團(tuán)AI芯片與機(jī)器人布局,成AI巨頭

    據(jù)悉,該芯片將由臺(tái)積電(2330)操刀生產(chǎn)。軟銀集團(tuán)對(duì)AI發(fā)展的熱情高漲,其與鴻(2317)集團(tuán)在人形機(jī)器人Pepper項(xiàng)目上的成功合作,以及樺漢(6414)在AI相關(guān)領(lǐng)域的實(shí)力,引
    的頭像 發(fā)表于 05-13 10:09 ?424次閱讀

    機(jī)器人榮獲“中國協(xié)作機(jī)器人創(chuàng)新產(chǎn)品獎(jiǎng)”:創(chuàng)新引領(lǐng),智造未來

    可持續(xù)發(fā)展。機(jī)器人榮獲維科杯·OFweek2023中國協(xié)作機(jī)器人創(chuàng)新產(chǎn)品獎(jiǎng)AI焊接機(jī)器人
    的頭像 發(fā)表于 04-23 08:12 ?827次閱讀
    <b class='flag-5'>海</b>默<b class='flag-5'>機(jī)器人</b>榮獲“中國協(xié)作<b class='flag-5'>機(jī)器人</b>創(chuàng)新產(chǎn)品獎(jiǎng)”:創(chuàng)新引領(lǐng),智造未來

    藍(lán)芯科技正式發(fā)布智能搬運(yùn)機(jī)器人VMR-FR31510L

    4月18日,藍(lán)芯科技正式發(fā)布智能搬運(yùn)機(jī)器人VMR-FR31510L。 該產(chǎn)品搭載藍(lán)芯核心技術(shù)LX-MRDVS(藍(lán)芯-移動(dòng)機(jī)器人深度視覺系統(tǒng))
    的頭像 發(fā)表于 04-20 10:58 ?785次閱讀

    NVIDIA Isaac機(jī)器人平臺(tái)升級(jí),加速AI機(jī)器人技術(shù)革新

    NVIDIA Isaac機(jī)器人平臺(tái)近期實(shí)現(xiàn)重大升級(jí),通過引入最新的生成AI技術(shù)和先進(jìn)的仿真技術(shù),顯著加速了AI機(jī)器人技術(shù)的發(fā)展步伐。該平臺(tái)
    的頭像 發(fā)表于 03-27 10:36 ?609次閱讀

    生成AI通過NVIDIA Isaac平臺(tái)提高機(jī)器人的智能化水平

    今日,NVIDIA 機(jī)器人和邊緣計(jì)算副總裁 Deepu Talla 在 CES 上的特別演講中,詳細(xì)介紹了 NVIDIA 及合作伙伴是如何將生成AI機(jī)器人技術(shù)相結(jié)合的。
    的頭像 發(fā)表于 01-09 10:27 ?1075次閱讀
    <b class='flag-5'>生成</b>式<b class='flag-5'>AI</b>通過NVIDIA Isaac平臺(tái)提高<b class='flag-5'>機(jī)器人</b>的智能化水平

    機(jī)器人:回顧2023,展望2024

    導(dǎo)語時(shí)光荏苒,轉(zhuǎn)瞬間已經(jīng)來到2024年的門檻?;厥走^去的一年,機(jī)器人機(jī)器人領(lǐng)域取得了巨大的進(jìn)步與突破,同時(shí)也為未來的發(fā)展奠定了堅(jiān)實(shí)的基礎(chǔ)。在新的一年里,我們將持續(xù)創(chuàng)新,以更高的目
    的頭像 發(fā)表于 01-01 08:12 ?887次閱讀
    <b class='flag-5'>海</b>默<b class='flag-5'>機(jī)器人</b>:回顧2023,展望2024

    【開源項(xiàng)目】Emo:基于樹莓派 4B DIY 能笑會(huì)動(dòng)的桌面機(jī)器人

    復(fù)雜的功能,我們采用 Python 的 multiprocessing 包,這使機(jī)器人能夠同時(shí)執(zhí)行多個(gè)任務(wù),從而提高運(yùn)行效率。 我們已經(jīng)為你編寫好項(xiàng)目代碼,你只需克隆到本地即可使用。 git
    發(fā)表于 12-26 15:18

    機(jī)器人擁抱AI大模型已成共識(shí)!

    目前普遍的共識(shí)是,機(jī)器人擁抱AI大模型的過程就是具身智能機(jī)器人的實(shí)現(xiàn)過程,融合AI大模型的具身智能機(jī)器人將是未來
    發(fā)表于 12-22 17:08 ?358次閱讀

    劍指人形機(jī)器人賽道,泰科機(jī)器人推出重磅關(guān)節(jié)模組

    泰科機(jī)器人幾年前就研判人形機(jī)器人賽道將會(huì)成為熱點(diǎn),決定研發(fā)人形機(jī)器人適用的關(guān)節(jié)模組,經(jīng)過艱苦的技術(shù)攻堅(jiān),泰科機(jī)器人推出了一系列適用于仿生
    的頭像 發(fā)表于 11-22 11:12 ?667次閱讀
    劍指人形<b class='flag-5'>機(jī)器人</b><b class='flag-5'>賽道</b>,泰科<b class='flag-5'>機(jī)器人</b>推出重磅關(guān)節(jié)模組