0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

ML與傳感,軟硬件結(jié)合的傳感技術(shù)又將升級機器人感知能力

Simon觀察 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:李寧遠 ? 2022-03-30 17:21 ? 次閱讀

在傳統(tǒng)的工業(yè)機器人傳感器的種類與數(shù)量已經(jīng)不少了,壓力、溫度、速度等等方面都少不了傳感器提供的關(guān)鍵數(shù)據(jù)。隨著機器人的升級換代,機器人與人在同一環(huán)境里協(xié)作、合作的趨勢愈發(fā)明顯。不僅是在工業(yè)場景中,日常生活中機器與人類共存的案例也多了起來。這意味著機器人傳感與感知的能力越來越重要。

機器人系統(tǒng)的性能,尤其是偏智能化的性能,在很大程度上取決于傳感系統(tǒng)提供關(guān)鍵的數(shù)據(jù),尤其是ML和AI系統(tǒng)開始在機器人應(yīng)用中普及后?,F(xiàn)在各種精密的傳感器,再加上能夠?qū)鞲衅鲾?shù)據(jù)進行深度融合整理的系統(tǒng)讓機器人擁有了出色的感知,機器人與人共同協(xié)作不再是不可能實現(xiàn)的事。

ML與AI,傳感數(shù)據(jù)融合邊緣化處理

機器學(xué)習(xí)ML在機器人行業(yè)流行的時間并不短,但真正開始應(yīng)用還是近幾年的事情,離整個行業(yè)開始廣泛應(yīng)用還需時日。機器深度學(xué)習(xí)分訓(xùn)練和推理,訓(xùn)練過程通常在云中離線進行,需要將大量的傳感器數(shù)據(jù)反饋到神經(jīng)網(wǎng)絡(luò)中。訓(xùn)練完成后的AI系統(tǒng)可以在協(xié)作機器人中完成檢測物品、識別人員等等應(yīng)用。

(機器人感知,TI


在ML執(zhí)行算法的推理階段需要融合傳感器數(shù)據(jù)做出判斷,而且這個過程幾乎是實時的,只有實時融合傳感器數(shù)據(jù)做出推理才能達到機器的協(xié)作性,云計算的速度肯定是不能滿足協(xié)作要求的實時低延遲響應(yīng)。所以ML和AI系統(tǒng)需要放在邊緣。

中心化的AI模型相當(dāng)依賴高集成度的處理芯片,而且必須要在底層芯片設(shè)計上就考慮好算法模型在不同場景中有限的部署條件,包括算力、功耗和硅片面積的分配。在大量的數(shù)據(jù)中篩選高質(zhì)量的傳感器數(shù)據(jù)并不一件容易的事情,在芯片上執(zhí)行深度學(xué)習(xí)任務(wù)需要芯片的硬件傳感器的持續(xù)優(yōu)化。

推理引擎不僅需要豐富的外設(shè)來連接各種傳感器,還需要可以支撐機器視覺算法的高性能處理能力。國產(chǎn)的邊緣AI芯片在機器人應(yīng)用上走得并不慢,不管是在移動機器人上應(yīng)用廣泛的地平線旭日系列,還是在機器視覺上取得突破的嘉楠勘智系列,可以看到國產(chǎn)芯片在性能、功耗、靈活性和成本之間找到了一個較為平衡的點。SoC也是一個不錯的選擇,集成式的SoC可以讓單芯片的方案不局限于運行ML和AI,在整個傳感器組件的融合上也能出一份力。

(勘智系列,嘉楠)


協(xié)作機器人與移動機器人融合傳感技術(shù)應(yīng)用

協(xié)作機器人在部署前需要預(yù)見并定義在物理空間內(nèi)可能與人員之間發(fā)生的碰撞,如果考慮到激光等其他傳感,在虛擬空間上同樣需要預(yù)見可能出現(xiàn)的干擾。高水平的環(huán)境感知能力必須做到充分的冗余度,來做到快速檢測并防止可能發(fā)生的碰撞。這極度依賴于各類傳感器提供的大量環(huán)境數(shù)據(jù)信息,并且處理芯片能快速通過ML推理實現(xiàn)實時的判斷。

(協(xié)作機器人,TI)


機器人內(nèi)部的溫濕度傳感同樣重要,不僅要對工作環(huán)境還要對機器人組件內(nèi)部進行溫濕度監(jiān)控,否則電機在重負載下的發(fā)熱與功耗是一大隱患。目前幾乎所有用于機器人的傳感器件都是溫度敏感元件并且設(shè)置了熱補償,該趨勢大大提升了傳感應(yīng)用的穩(wěn)定性。

移動機器人的傳感應(yīng)用就更多了,定位、繪圖、導(dǎo)航、識別每個功能都離不開傳感數(shù)據(jù)的融合與處理。超聲波、IMU、紅外、激光雷達、毫米波雷達都是為機器人系統(tǒng)提供環(huán)境數(shù)據(jù)的器件,配合ML推理進行深度的環(huán)境分析,移動機器人可以達到實時感知周圍任何目標的智能程度。

基于DLP技術(shù)的3DToF通過靈活的結(jié)構(gòu)光在分辨率的提升上可以做到更小的尺寸,這類傳感不僅能讓機器在定位地圖構(gòu)建上更精確更深度,還能將分辨率提高數(shù)個級別,結(jié)合AI與ML能達到很高的定位精度;振動傳感器這一類用于檢測機器人內(nèi)部器件的傳感,在傳感技術(shù)融合的升級過程中將預(yù)測的準確性再次做了提高;毫米波雷達更不用說,作為取代傳統(tǒng)機器人移動傳感的先進技術(shù),在融合IMU或者GNSS后,結(jié)合ML幾乎可以完成機器人移動功能的所有需求……

小結(jié)

各種精密傳感器的融合只是傳感技術(shù)升級的開始,現(xiàn)在機器學(xué)習(xí)與AI技術(shù)也開始與傳感器件開始融合,對傳感器數(shù)據(jù)進行匯總、篩選、訓(xùn)練、判斷。技術(shù)與硬件深度融合的機器人傳感系統(tǒng)開始擁有了出色的實時感知能力,在機器人行業(yè)鋪開應(yīng)用也許已指日可待。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2541

    文章

    50003

    瀏覽量

    747777
  • 機器人
    +關(guān)注

    關(guān)注

    210

    文章

    27852

    瀏覽量

    204696
  • ML
    ML
    +關(guān)注

    關(guān)注

    0

    文章

    143

    瀏覽量

    34447
收藏 人收藏

    評論

    相關(guān)推薦

    人形機器人感知變化的未來

    電子皮膚作為一種新型的仿生柔性觸覺傳感系統(tǒng),在人形機器人感知過程中扮演著至關(guān)重要的角色。盡管國內(nèi)部分廠商已經(jīng)開始布局柔性觸覺傳感器的生產(chǎn),但多數(shù)仍處于早期階段,多功能柔性觸覺
    的頭像 發(fā)表于 08-05 00:00 ?645次閱讀
    人形<b class='flag-5'>機器人</b><b class='flag-5'>感知</b>變化的未來

    人形機器人感知系統(tǒng)的特點:多模態(tài)感知、高精度、實時性

    電子發(fā)燒友網(wǎng)報道(文/李彎彎)感知系統(tǒng)是人形機器人實現(xiàn)智能交互和自主行動的關(guān)鍵組成部分。該系統(tǒng)通常包括多種傳感器和算法,用于收集、處理和分析來自外部環(huán)境的信息。不同企業(yè)所采用的感知系統(tǒng)
    的頭像 發(fā)表于 07-30 01:05 ?3840次閱讀

    視覺傳感器助力機器人“看到”并理解周圍世界

    ,正因為有了傳感器,機器人才具備了類似人類的知覺功能和反應(yīng)能力。 ? 機器人需要用到哪些傳感器 ? 機器
    的頭像 發(fā)表于 07-10 00:16 ?3128次閱讀

    工業(yè)機器人控制系統(tǒng)的基本組成有哪些

    機器人關(guān)節(jié)的角度位置。 速度傳感器 :測量機器人關(guān)節(jié)的旋轉(zhuǎn)速度。 力/力矩傳感器 :檢測機器人末端執(zhí)行器與環(huán)境的交互力。 視覺
    的頭像 發(fā)表于 06-16 15:26 ?1088次閱讀

    實現(xiàn)機器人自主感知避障,傳感的多樣選擇

    要的角色。 ? 為了讓機器人能夠高效、安全地完成任務(wù),感知避障環(huán)節(jié)顯得尤為關(guān)鍵。其實應(yīng)用在傳統(tǒng)的機器人傳感器的種類與數(shù)量已經(jīng)不少,壓力、溫度、速度等等方面都少不了
    的頭像 發(fā)表于 05-07 00:20 ?2475次閱讀

    NVIDIA Isaac機器人平臺升級,加速AI機器人技術(shù)革新

    NVIDIA Isaac機器人平臺近期實現(xiàn)重大升級,通過引入最新的生成式AI技術(shù)和先進的仿真技術(shù),顯著加速了AI機器人
    的頭像 發(fā)表于 03-27 10:36 ?504次閱讀

    工業(yè)智能機器人以其卓越的技術(shù)和創(chuàng)新能力,正引領(lǐng)著行業(yè)的升級與變革

    技術(shù)先鋒”富唯智能機器人:推動移動機器人行業(yè)升級與變革 在快速發(fā)展的移動機器人領(lǐng)域中,富唯智能機器人
    的頭像 發(fā)表于 03-04 11:47 ?452次閱讀
    工業(yè)智能<b class='flag-5'>機器人</b>以其卓越的<b class='flag-5'>技術(shù)</b>和創(chuàng)新<b class='flag-5'>能力</b>,正引領(lǐng)著行業(yè)的<b class='flag-5'>升級</b>與變革

    全面分析:人形機器人快速發(fā)展,哪些國產(chǎn)傳感器將受益?(深度報告)

    ? ? 傳感器是人形機器人感知層的關(guān)鍵,基于MEMS工藝的力控、觸覺、慣性傳感器有望充分受益。 ? ① 人形機器人將更重視
    的頭像 發(fā)表于 02-21 09:53 ?764次閱讀
    全面分析:人形<b class='flag-5'>機器人</b>快速發(fā)展,哪些國產(chǎn)<b class='flag-5'>傳感</b>器將受益?(深度報告)

    機器人會用到哪些傳感

    機器人會用到哪些傳感器? 機器人是一種能夠自主行動并感知環(huán)境的自動化設(shè)備。為了實現(xiàn)這一目標,機器人通常需要使用各種不同類型和功能的
    的頭像 發(fā)表于 01-03 15:59 ?2263次閱讀

    高動態(tài)人形機器人“夸父”通過OpenHarmony 3.2 Release版本兼容性測評

    深圳開鴻數(shù)字產(chǎn)業(yè)發(fā)展有限公司(以下簡稱”深開鴻“)OpenHarmony生態(tài)建設(shè)能力和在新興行業(yè)領(lǐng)域的技術(shù)創(chuàng)新實力,也標志著OpenHarmony在新興行業(yè)領(lǐng)域又向前邁進了一步。 夸父人形機器人由深開
    發(fā)表于 12-20 09:31

    機器人的態(tài)勢感知成為行業(yè)研究熱點

    新一代機器人的態(tài)勢感知將成為研究的熱點和難點。通過解決環(huán)境感知、自身狀態(tài)感知和多傳感器融合等問題,可以提高
    發(fā)表于 12-05 11:30 ?312次閱讀

    無縫連接和扭矩傳感給工業(yè)機器人帶來的轉(zhuǎn)變

    ,但在更多應(yīng)用場景里,小型工業(yè)機器人的數(shù)量增加得更為迅速,而且可完成的任務(wù)也更加多樣。 ? 工業(yè)機器人升級背后的無縫連接 ? 工業(yè)機器人技術(shù)
    的頭像 發(fā)表于 11-29 00:15 ?1105次閱讀

    力控機器人是干什么的

    力控機器人是一種能夠感知力量并具有實時控制能力機器人系統(tǒng)。 它們可以在與人類進行精準協(xié)作和合作時,將力傳感
    的頭像 發(fā)表于 11-08 17:25 ?946次閱讀

    軟硬件融合的概念和內(nèi)涵

    跟很多朋友交流,當(dāng)提到軟硬件融合的時候,他們會這么說:“軟硬件融合,難道不是顯而易見嗎?我感覺在二三十年前就已經(jīng)有這個概念了?!痹谒麄兊南敕ɡ铮鋵崳?b class='flag-5'>軟硬件融合等同于軟硬件協(xié)同,甚至等
    的頭像 發(fā)表于 10-17 14:36 ?1177次閱讀
    <b class='flag-5'>軟硬件</b>融合的概念和內(nèi)涵

    使用Arduino和PAJ7620手勢傳感器制作手勢控制機器人

    使用Arduino和PAJ7620手勢傳感器制作手勢控制機器人,簡單程序即可實現(xiàn)。小小的傳感器可以識別各種手勢。它采用內(nèi)置的空間傳感器,可以感知
    發(fā)表于 09-27 06:17