0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

機器人視覺伺服控制系統(tǒng)的應用類型及發(fā)展趨勢分析

電子設計 ? 來源: 伺服控制 ? 作者:段彥婷,蔡陳生, ? 2021-04-08 09:11 ? 次閱讀

作者:段彥婷,蔡陳生,王鵬飛,王寧,陳平

本文對機器人視覺伺服技術進行了綜述,介紹了機器人視覺伺服系統(tǒng)的概念及發(fā)展歷程和分類,重點介紹了基于位置的視覺伺服系統(tǒng)和基于圖像的視覺伺服系統(tǒng)。對機器人視覺所涉及的前沿問題做了概括,并指出了目前研究中所存在的問題及今后發(fā)展方向。

目前,在全世界的制造業(yè)中,工業(yè)機器人已經在生產中起到了越來越重要的作用。為了使機器人能夠勝任更復雜的工作,機器人不但要有更好的控制系統(tǒng),還需要更多地感知環(huán)境的變化。其中機器人視覺以其信息量大、信息完整成為最重要的機器人感知功能。

機器人視覺伺服系統(tǒng)是機器視覺和機器人控制的有機結合,是一個非線性、強耦合的復雜系統(tǒng),其內容涉及圖象處理、機器人運動學和動力學、控制理論等研究領域。隨著攝像設備性能價格比和計算機信息處理速度的提高,以及有關理論的日益完善,視覺伺服已具備實際應用的技術條件,相關的技術問題也成為當前研究的熱點。

本文對機器人視覺伺服技術進行了綜述,介紹了機器人視覺伺服系統(tǒng)的概念及發(fā)展歷程和分類,重點介紹了基于位置的視覺伺服系統(tǒng)和基于圖像的視覺伺服系統(tǒng)。對機器人視覺所涉及的前沿問題做了概括,并指出了目前研究中所存在的問題及今后發(fā)展方向。

機器人視覺伺服系統(tǒng)

視覺伺服的定義:

人類對于外部的信息獲取大部分是通過眼睛獲得的,千百年來人類一直夢想著能夠制造出智能機器,這種智能機器首先具有人眼的功能,可以對外部世界進行認識和理解。人腦中有很多組織參與了視覺信息的處理,因而能夠輕易的處理許多視覺問題,可是視覺認知作為一個過程,人類卻知道的很少,從而造成了對智能機器的夢想一直難以實現。隨著照相機技術的發(fā)展和計算機技術的出現,具有視覺功能的智能機器開始被人類制造出來,逐步形成了機器視覺學科和產業(yè)。所謂機器視覺,美國制造工程師協(xié)會(sme society of manufacturing engineers)機器視覺分會和美國機器人工業(yè)協(xié)會(ria robotic industries association) 的自動化視覺分會給出的定義是:

“機器視覺是通過光學的裝置和非接觸的傳感器自動地接收和處理一個真實物體的圖像,以獲得所需信息或用于控制機器人運動的裝置?!?/p>

機器視覺作為與人眼類似的機器仿生系統(tǒng),從廣義角度凡是通過光學裝置獲取真實物體的信息以及對相關信息的處理與執(zhí)行都是機器視覺,這就包括了可見視覺以及非可見視覺,甚至包括人類視覺不能直接觀察到的、物體內部信息的獲取與處理等。

機器人視覺發(fā)展歷程

上個世紀60年代,由于機器人和計算機技術的發(fā)展,人們開始研究具有視覺功能的機器人。但在這些研究中,機器人的視覺與機器人的動作,嚴格上講是開環(huán)的。機器人的視覺系統(tǒng)通過圖像處理,得到目標位姿,然后根據目標位姿,計算出機器運動的位姿,在整個過程中,視覺系統(tǒng)一次性地“提供”信息,然后就不參與過程了。在1973年,有人將視覺系統(tǒng)應用于機器人控制系統(tǒng),在這一時期把這一過程稱作視覺反饋(visual feedback)。直到1979年,hill和park提出了“視覺伺服”(visual servo)概念。很明顯,視覺反饋的含義只是從視覺信息中提取反饋信號,而視覺伺服則是包括了從視覺信號處理,到機器人控制的全過程,所以視覺伺服比視覺反饋能更全面地反映機器人視覺和控制的有關研究內容。

上個世紀80年以來,隨著計算機技術和攝像設備的發(fā)展,機器人視覺伺服系統(tǒng)的技術問題吸引了眾多研究人員的注意。在過去的幾年里,機器人視覺伺服無論是在理論上還是在應用方面都取得了很大進展。在許多學術會議上,視覺伺服技術經常列為會議的一個專題。視覺伺服已逐漸發(fā)展為跨機器人、自動控制和圖像處理等技術領域的一門獨立技術。

機器人視覺伺服系統(tǒng)分類:

目前,機器人視覺伺服控制系統(tǒng)有以下幾種分類方式:

●按照攝像機的數目的不同,可分為單目視覺伺服系統(tǒng)、雙目視覺伺服系統(tǒng)以及多目視覺伺服系統(tǒng)

單目視覺系統(tǒng)只能得到二維平面圖像,無法直接得到目標的深度信息;多目視覺伺服系統(tǒng)可以獲取目標多方向的圖像,得到的信息豐富,但圖像的信息處理量大,且攝像機越多越難以保證系統(tǒng)的穩(wěn)定性。當前的視覺伺服系統(tǒng)主要采用雙目視覺。

●按照攝像機放置位置的不同,可以分為手眼系統(tǒng)(eye in hand)和固定攝像機系統(tǒng)(eye to hand或stand alone)

在理論上手眼系統(tǒng)能夠實現精確控制,但對系統(tǒng)的標定誤差和機器人運動誤差敏感;固定攝像機系統(tǒng)對機器人的運動學誤差不敏感,但同等情況下得到的目標位姿信息的精度不如手眼系統(tǒng),所以控制精度相對也低。

●按照機器人的空間位置或圖像特征,視覺伺服系統(tǒng)分為基于位置的視覺伺服系統(tǒng)和基于圖像的視覺伺服系統(tǒng)

圖1 基于位置控制的動態(tài)look and move系統(tǒng)

在基于位置的視覺伺服系統(tǒng)(如圖1所示)中,對圖像進行處理后計算出目標相對于攝像機和機器人的位姿,所以這就要求對攝像機、目標和機器人的模型進行校準,校準精度影響控制精度,這是這種方法的難點??刂茣r將需要變化的位姿轉化成機器人關節(jié)轉動的角度,由關節(jié)控制器來控制機器人關節(jié)轉動。

圖2 基于圖像控制的direct visual servo系統(tǒng)

在基于圖像的視覺伺服系統(tǒng)(如圖2所示)中,控制誤差信息來自于目標圖像特征與期望圖像特征之間的差異。對于這種控制方法,關鍵的問題是如何建立反映圖像差異變化與機器手位姿速度變化之間關系的圖像雅可比矩陣;另外一個問題是,圖像是二維的,計算圖像雅可比矩陣需要估計目標深度(三維信息),而深度估計一直是計算機視覺中的難點。

雅可比矩陣的計算方法有公式推導法、標定法、估計方法以及學習方法等,前者可以根據模型推導或標定得到,后者可以在線估計,學習方法主要利用神經網絡方法。

●按照采用閉環(huán)關節(jié)控制器的機器人,視覺伺服系統(tǒng)分為動態(tài)觀察-移動系統(tǒng)和直接視覺伺服

前者采用機器人關節(jié)反饋內環(huán)穩(wěn)定機械臂,由圖像處理模塊計算出攝像機應具有的速度或位置增量,反饋至機器人關節(jié)控制器;后者則由圖像處理模塊直接計算機器人手臂各關節(jié)運動的控制量。

視覺伺服所面臨的主要問題

視覺伺服的研究到目前已有近20年的歷史,但是由于視覺伺服所涉及的學科眾多,所以其發(fā)展有賴于這些學科的發(fā)展,目前在視覺伺服的研究中仍然有很多問題沒有很好地解決。

●圖像處理的方法在理論和實際計算處理速度上都是圖像伺服最大的難點;

●在圖像處理完成后,圖像特征與機器人關節(jié)運動之間模型的建立是圖像伺服的另一難點;

●目前的許多控制方法都不能保證系統(tǒng)在工作時是大范圍穩(wěn)定的,所以對有關控制方法的研究也是必要的。

視覺伺服的發(fā)展前景

未來視覺伺服的研究方向主要有以下幾方面:

●在實際環(huán)境下快速、魯棒地獲取圖像特征是視覺伺服系統(tǒng)的關鍵問題

由于圖像處理的信息量大和可編程器件技術的發(fā)展,近期把通用算法硬件化,以加快信息處理的速度的方法可能會使這一問題的研究取得進展。

●建立適合機器人視覺系統(tǒng)的有關理論和軟件

目前的許多機器人視覺伺服系統(tǒng)的圖像處理方法都不是針對機器人視覺系統(tǒng)的,如果有這樣的專用的軟件平臺,在完成視覺伺服任務時,就可以減少工作量,甚至可以通過視覺信息處理硬件化來提高視覺伺服系統(tǒng)的性能。

●將各種人工智能方法應用于機器人視覺伺服系統(tǒng)

雖然神經網絡在機器人視覺伺服中已得到應用,但許多智能方法在機器人視覺伺服系統(tǒng)中還沒有得到充分地應用,而且,目前研究有過于依賴數學建模和數學計算的傾向,這使得機器人視覺伺服系統(tǒng)在工作時計算量太大,目前計算機的處理速度很難滿足系統(tǒng)快速性的要求,但是人類在實現有關的功能時并不是通過大量的計算來完成的,這就啟發(fā)大家是否可以用人工智能的方法降低數學計算量,以滿足系統(tǒng)快速性的要求。

●將主動視覺技術應用于機器人視覺伺服系統(tǒng)

主動視覺是當今計算機視覺和機器視覺研究領域中的一個熱點,在這里視覺系統(tǒng)能主動地感知環(huán)境,按一定規(guī)則主動地提取需要的圖像特征,這使得在一般情況下難以解決的問題得以解決。

●將視覺傳感器與其它外部傳感器結合起來

為了使機器人能夠更全面地感知環(huán)境,特別是對機器人視覺系統(tǒng)起信息補充,可以將多種傳感器加入機器人視覺系統(tǒng),這樣做可以克服機器人視覺系統(tǒng)的一些困難,但多傳感器的引入,就需要解決機器人視覺系統(tǒng)的信息融合和信息冗余問題。

結語

近年來,機器人視覺伺服技術有了很大發(fā)展,國內、外機器人視覺系統(tǒng)的實際應用也越來越多,許多技術難題都有希望在近期的研究中取得進展。在未來一段時間內,機器人視覺伺服系統(tǒng)將在機器人技術中占有突出的地位,機器人視覺伺服系統(tǒng)將會越來越多地應用于工業(yè)生產中。

責任編輯:gt

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯系本站處理。 舉報投訴
  • 控制系統(tǒng)

    關注

    41

    文章

    6417

    瀏覽量

    110092
  • 機器人
    +關注

    關注

    210

    文章

    27838

    瀏覽量

    204571
  • 計算機
    +關注

    關注

    19

    文章

    7168

    瀏覽量

    87142
  • 機器視覺
    +關注

    關注

    161

    文章

    4266

    瀏覽量

    119540
收藏 人收藏

    評論

    相關推薦

    基于FPGA EtherCAT的六自由度機器人視覺伺服控制設計

    。實物圖如圖2-4 所示。 圖 2-4 環(huán)形光源實物圖 基于伊瑟特的六自由度機器人視覺伺服控制系統(tǒng)如圖 2-5 所示。 設計演示 視覺
    發(fā)表于 05-29 16:17

    工業(yè)機器人經典好書籍——《工業(yè)機器人

    的作用。  根據工業(yè)機器人發(fā)展趨勢,本書在編寫內容上略有偏重。對工業(yè)機器人的運動學、動力學、基本控制系統(tǒng)等傳統(tǒng)內容的介紹比較簡潔;對機器
    發(fā)表于 02-03 10:51

    中國工業(yè)機器人行業(yè)發(fā)展和未來趨勢分析

    機器人的技術發(fā)展趨勢從近幾年世界機器人推出的產品來看,工業(yè)機器人技術正在向智能化、模塊化和系統(tǒng)化的方向發(fā)
    發(fā)表于 04-25 16:45

    視覺機器人發(fā)展現狀與趨勢

    安全,對一些特殊工種,如噴涂,鑄造等通過勞動法強制采用工業(yè)機器人來代替,這樣可以大大增加工業(yè)機器人的需求數量。視覺機器人我國的機器人產業(yè)化必
    發(fā)表于 09-08 10:34

    基于圖像的機器人視覺伺服系統(tǒng)該怎么設計?

      制造出像一樣具有智能的能替代人類勞動的機器人,一直是人類的夢想,人類獲取的信息80%以上是通過視覺。因此,在智能機器人的研究中,具有視覺
    發(fā)表于 09-27 08:07

    多軸機器人發(fā)展趨勢

    工業(yè)生產中,傳統(tǒng)的工業(yè)機器人在生產適用性上已經不能滿足日益增長的多任務需求,多軸機器人順勢發(fā)展,趨勢明顯。多軸機器人是能夠實現自動
    發(fā)表于 07-29 06:57

    噴涂機器人發(fā)展趨勢

    噴涂機器人發(fā)展趨勢噴涂機器人噴涂機器人是一種主要用于表面涂覆工作的特殊機器人,是機器人技術和表
    發(fā)表于 03-10 09:23

    未來的機器人3D視覺系統(tǒng)將會發(fā)生什么樣的變化?

    視覺系統(tǒng)發(fā)展趨勢怎么樣?3D視覺系統(tǒng)應用在哪些方面?未來的機器人3D視覺系統(tǒng)將會發(fā)生什么樣的變化?
    發(fā)表于 05-11 06:40

    視覺伺服控制系統(tǒng)

    視覺伺服控制系統(tǒng),最近在學習相關知識,做個簡要總結:背景介紹國內外研究現狀算法介紹研究問題及實施方案總結展望背景介紹研究表明,人類獲得的80%以上的感官信息來自于視覺器官。借鑒同樣的原
    發(fā)表于 07-12 06:03

    機器人系統(tǒng)控制需求簡介

    第二章 機器人系統(tǒng)控制需求簡介2.1 工業(yè)機器人系統(tǒng)組成機械本體:精密減速機、伺服電機、
    發(fā)表于 09-08 07:44

    什么是機器人控制系統(tǒng)

    什么是機器人控制系統(tǒng)?機器人的運動控制系統(tǒng)包含哪些方面?機器人控制系統(tǒng)的基本功能有哪些?
    發(fā)表于 10-11 09:38

    機器人伺服系統(tǒng)詳解(組成/原理框圖/執(zhí)行元件/發(fā)展趨勢

    伺服機構控制的重要部分。因而要了解機器人的運作過程,必然繞不過伺服系統(tǒng)。 伺服系統(tǒng) 伺服系統(tǒng)
    的頭像 發(fā)表于 07-10 01:04 ?2.7w次閱讀

    基于PLC的機器人伺服運動控制系統(tǒng)設計詳解

    本文首先介紹了伺服運動控制系統(tǒng)主要特點,其次介紹了伺服運動控制系統(tǒng)工作原理,最后從機器人移動方式的選擇與結構設計、移動
    的頭像 發(fā)表于 06-01 14:19 ?1.6w次閱讀

    機器人控制系統(tǒng)發(fā)展趨勢

    本文主要闡述了工業(yè)機器人控制系統(tǒng)發(fā)展趨勢。
    發(fā)表于 11-04 08:50 ?5109次閱讀

    機器人關節(jié)伺服控制系統(tǒng)設計與仿真

    機器人關節(jié)伺服控制系統(tǒng)設計與仿真
    發(fā)表于 06-22 14:53 ?38次下載