0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

機器人視覺的9大挑戰(zhàn)

454398 ? 來源:ST社區(qū) ? 作者:ST社區(qū) ? 2022-12-09 10:25 ? 次閱讀

來源:ST社區(qū)

機器人視覺解決方案是我們實現(xiàn)機器人視野的幾大挑戰(zhàn)。即便變得越來越簡單易用,還是有一些棘手的問題。很多因素影響機器人在環(huán)境中的視覺,任務設置和工作場所。這里有9個總結(jié)出來的機器人視覺挑戰(zhàn):

照明

如果有過在低光照下拍攝數(shù)碼照片的經(jīng)驗,就會知道照明至關重要。糟糕的照明會毀掉一切。成像傳感器不像人眼那樣適應性強或敏感。如果照明類型錯誤,視覺傳感器將無法可靠地檢測到物體。

有各種克服照明挑戰(zhàn)的方法。一種方法是將有源照明結(jié)合到視覺傳感器本身中。其他解決方案包括使用紅外照明,環(huán)境中的固定照明或使用其他形式的光的技術,例如激光。

變形或鉸接

球是用計算機視覺設置來檢測的簡單對象。你可能只是檢測它的圓形輪廓,也許使用模板匹配算法。但是,如果球被壓扁,它會改變形狀,同樣的方法將不再起作用。這是變形。它會導致一些機器人視覺技術相當大的問題。

鉸接類似,是指由可移動關節(jié)引起的變形。例如,當您在肘部彎曲手臂時,手臂的形狀會發(fā)生變化。各個鏈接(骨骼)保持相同的形狀,但輪廓變形。由于許多視覺算法使用形狀輪廓,因此清晰度使得物體識別更加困難。

職位和方向

機器人視覺系統(tǒng)最常見的功能是檢測已知物體的位置和方向。因此,大多數(shù)集成視覺解決方案通常都克服了這兩者面臨的挑戰(zhàn)。

只要整個物體可以在攝像機圖像內(nèi)被查看,檢測物體的位置通常是直截了當?shù)?。許多系統(tǒng)對于對象方向的變化也是強健的。但是,并不是所有的方向都是平等的。雖然檢測沿一個軸旋轉(zhuǎn)的物體是足夠簡單的,但是檢測物體何時3D旋轉(zhuǎn)則更為復雜。

背景

圖像的背景對物體檢測的容易程度有很大的影響。想象一個極端的例子,對象被放置在一張紙上,在該紙上打印同一對象的圖像。在這種情況下,機器人視覺設置可能不可能確定哪個是真實的物體。

完美的背景是空白的,并提供與檢測到的物體良好的對比。它的確切屬性將取決于正在使用的視覺檢測算法。如果使用邊緣檢測器,那么背景不應該包含清晰的線條。背景的顏色和亮度也應該與物體的顏色和亮度不同。

閉塞

遮擋意味著物體的一部分被遮住了。在前面的四個挑戰(zhàn)中,整個對象出現(xiàn)在相機圖像中。遮擋是不同的,因為部分對象丟失。視覺系統(tǒng)顯然不能檢測到圖像中不存在的東西。

有各種各樣的東西可能會導致遮擋,包括:其他物體,機器人的部分或相機的不良位置??朔趽醯姆椒ㄍǔI婕皩ο蟮目梢姴糠峙c其已知模型進行匹配,并假定對象的隱藏部分存在。

比例

在某些情況下,人眼很容易被尺度上的差異所欺騙。機器人視覺系統(tǒng)也可能被他們弄糊涂了。想象一下,你有兩個完全相同的物體,只是一個比另一個大。想象一下,您正在使用固定的2D視覺設置,物體的大小決定了它與機器人的距離。如果您訓練系統(tǒng)識別較小的物體,則會錯誤地檢測到兩個物體是相同的,并且較大的物體更接近相機。

尺度的另一個問題,也許不那么明顯,就是像素值的問題。如果將機器人相機放置得很遠,則圖像中的對象將由較少的像素表示。當有更多的像素代表對象時,圖像處理算法會更好地工作,但有一些例外。

照相機放置

不正確的相機位置可能會導致以前出現(xiàn)過的任何問題,所以重要的是要正確使用它。嘗試將照相機放置在光線充足的區(qū)域,以便在沒有變形的情況下盡可能清楚地看到物體,盡可能靠近物體而不會造成遮擋。照相機和觀看表面之間不應有干擾的背景或其他物體。

運動

移動有時會導致計算機視覺設置出現(xiàn)問題,特別是在圖像中出現(xiàn)模糊時。例如,這可能發(fā)生在快速移動的傳送帶上的物體上。數(shù)字成像傳感器在短時間內(nèi)捕獲圖像,但不會瞬間捕獲整個圖像。如果一個物體在捕捉過程中移動太快,將導致圖像模糊。我們的眼睛可能不會注意到視頻中的模糊,但算法會。當有清晰的靜態(tài)圖像時,機器人視覺效果最佳。

期望

與視覺算法的技術方面相比,最后的挑戰(zhàn)更多地涉及到您的視覺設置方法。機器人視野面臨的最大挑戰(zhàn)之一就是工作人員對于視覺系統(tǒng)能提供什么不切實際的期望。通過確保期望符合技術的能力,您將從技術中獲得最大收益。您可以通過確保員工接受關于視覺系統(tǒng)的教育來實現(xiàn)這一點。

審核編輯黃昊宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人視覺
    +關注

    關注

    0

    文章

    48

    瀏覽量

    10011
收藏 人收藏

    評論

    相關推薦

    【書籍評測活動NO.51】具身智能機器人系統(tǒng) | 了解AI的下一個浪潮!

    。 這些技術的綜合應用使具身智能系統(tǒng)能夠進行復雜的環(huán)境感知、決策制定和物理操作。例如,通過多模態(tài)感知技術,智能體能夠綜合視覺、 聽覺和觸覺數(shù)據(jù),更全面地理解和響應其所處的環(huán)境。 具身智能通過提高機器人
    發(fā)表于 11-11 10:20

    解鎖機器人視覺與人工智能的潛力,從“盲人機器”改造成有視覺能力的機器人(上)

    正如人類依賴眼睛和大腦來解讀世界,機器人也需要自己的視覺系統(tǒng)來有效運作。沒有視覺機器人就如同蒙上雙眼的人類,僅能執(zhí)行預編程的命令,容易碰撞障礙物,并犯下代價高昂的錯誤。這正是
    的頭像 發(fā)表于 10-12 09:56 ?299次閱讀
    解鎖<b class='flag-5'>機器人</b><b class='flag-5'>視覺</b>與人工智能的潛力,從“盲人<b class='flag-5'>機器</b>”改造成有<b class='flag-5'>視覺</b>能力的<b class='flag-5'>機器人</b>(上)

    開源項目!用ESP32做一個可愛的無用機器人

    巧妙設計的杠桿將開關推回“關”位置。這種玩具很常見,許多人已經(jīng)制作并上傳到Y(jié)ouTube上。 作者每年都會挑戰(zhàn)自己制作一個技術產(chǎn)品,今年他決定制作這個復雜的項目——可愛無用機器人。這個機器人參考了日本
    發(fā)表于 09-03 09:34

    開源項目!用ESP32做一個可愛的無用機器人

    巧妙設計的杠桿將開關推回“關”位置。這種玩具很常見,許多人已經(jīng)制作并上傳到Y(jié)ouTube上。 作者每年都會挑戰(zhàn)自己制作一個技術產(chǎn)品,今年他決定制作這個復雜的項目——可愛無用機器人。這個機器人參考了
    發(fā)表于 08-30 14:50

    工業(yè)機器人視覺技術的應用分為哪幾種?

    工業(yè)機器人視覺技術的應用非常廣泛,涉及到許多不同的領域和場景。以下是一些主要的應用領域和相關技術: 物體識別與定位 物體識別與定位是工業(yè)機器人視覺技術的基礎應用之一。通過使用攝像頭和其
    的頭像 發(fā)表于 07-09 09:38 ?545次閱讀

    機器人視覺與計算機視覺的區(qū)別與聯(lián)系

    機器人視覺與計算機視覺是兩個密切相關但又有所區(qū)別的領域。 1. 引言 在當今科技迅猛發(fā)展的時代,機器人和計算機視覺技術在各個領域發(fā)揮著越來越
    的頭像 發(fā)表于 07-09 09:27 ?536次閱讀

    Al大模型機器人

    金航標kinghelm薩科微slkor總經(jīng)理宋仕強介紹說,薩科微Al大模型機器人有哪些的優(yōu)勢?薩科微AI大模型機器人由清華大學畢業(yè)的天才少年N博士和王博士團隊開發(fā),與同行相比具有許多優(yōu)勢:語言
    發(fā)表于 07-05 08:52

    機器人視覺的應用范圍

    機器人視覺是一種將計算機視覺技術應用于機器人領域的技術,它使得機器人能夠感知和理解周圍環(huán)境,實現(xiàn)自主決策和執(zhí)行任務。隨著人工智能、
    的頭像 發(fā)表于 07-04 11:33 ?483次閱讀

    機器人視覺的結(jié)構(gòu)及工作原理

    機器人視覺是一種利用計算機視覺技術實現(xiàn)機器人對環(huán)境的感知和理解的技術。它涉及到圖像采集、圖像處理、特征提取、目標識別、場景理解等多個環(huán)節(jié)。 機器人
    的頭像 發(fā)表于 07-04 11:27 ?874次閱讀

    機器人視覺的作用是什么

    一、引言 機器人視覺機器人技術的重要組成部分,它利用計算機視覺技術對機器人周圍環(huán)境進行感知、識別和理解,為
    的頭像 發(fā)表于 07-04 11:24 ?548次閱讀

    基于FPGA EtherCAT的六自由度機器人視覺伺服控制設計

    和增強系統(tǒng)處理圖像的實時性,本文提出了一種伊瑟特的六自由度機器人視覺伺服控制系統(tǒng),將攝像頭集成到基于 Zynq的伊瑟特主站上,提高了視覺伺服的實時性.經(jīng)測試,該平臺能夠?qū)?b class='flag-5'>視覺檢測目標的
    發(fā)表于 05-29 16:17

    視覺機器人焊接的研究現(xiàn)狀

    視覺機器人焊接技術是將計算機視覺機器人技術相結(jié)合,實現(xiàn)自動焊接過程中的實時檢測、跟蹤和控制。這一領域的研究一直處于不斷發(fā)展之中,吸引了眾多研究人員和工程師的關注。本文將就
    的頭像 發(fā)表于 04-02 15:34 ?462次閱讀
    <b class='flag-5'>視覺</b><b class='flag-5'>機器人</b>焊接的研究現(xiàn)狀

    機器人基于開源的多模態(tài)語言視覺大模型

    ByteDance Research 基于開源的多模態(tài)語言視覺大模型 OpenFlamingo 開發(fā)了開源、易用的 RoboFlamingo 機器人操作模型,只用單機就可以訓練。
    發(fā)表于 01-19 11:43 ?352次閱讀
    <b class='flag-5'>機器人</b>基于開源的多模態(tài)語言<b class='flag-5'>視覺</b>大模型

    OpenHarmony人形機器人創(chuàng)新挑戰(zhàn)賽來啦

    12月28日,第二十六屆中國機器人及人工智能大賽人形機器人創(chuàng)新挑戰(zhàn)賽在蘇州正式發(fā)布,首次結(jié)合
    的頭像 發(fā)表于 12-30 08:32 ?1019次閱讀
    OpenHarmony人形<b class='flag-5'>機器人</b>創(chuàng)新<b class='flag-5'>挑戰(zhàn)</b>賽來啦

    AI人形機器人研究:與汽車行業(yè)聯(lián)動,主機廠押注人形機器人賽道

    2023年7月,谷歌DeepMind推出了機器人模型Robotics Transformer 2 (RT-2),這是一個視覺-語言-動作(VLA)模型,實現(xiàn)了視覺語言模型與機器人動作的
    的頭像 發(fā)表于 11-20 17:32 ?1145次閱讀
    AI人形<b class='flag-5'>機器人</b>研究:與汽車行業(yè)聯(lián)動,主機廠押注人形<b class='flag-5'>機器人</b>賽道