0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

姚小熊27 ? 來源:愛集微 ? 作者:愛集微 ? 2020-10-12 13:45 ? 次閱讀

華為發(fā)明的機器人凝視追蹤技術(shù),通過顯示模塊來模擬真實的機器人面部輸出,結(jié)合多種偏轉(zhuǎn)角度測量方法,實現(xiàn)了平滑的凝視追蹤效果,提高了機器人的擬人化程度。

集微網(wǎng)消息,在現(xiàn)代社會的家庭中,越來越多的父母不能時刻陪伴孩子,而此時可以使用智能機器人進行陪伴以及教育孩子。這種智能機器人可以與孩子進行交流,并且可以基于不同的對話內(nèi)容學習、更新與孩子的交流方式,可以說非常的人性化。

擬人特性作為衡量機器人智能化的重要指標之一,在人機交互的過程中,目標跟隨以及凝視跟蹤行為的準確性則直接反映機器人的擬人化程度,技術(shù)人員往往通過提高機器人的擬人化程度來提高用戶的使用體驗。

而所謂的凝視追蹤技術(shù),就是在機器人和用戶進行對話時捕捉用戶的眼睛位置并進行凝視,因為人們在談話時往往看著對方的眼睛,如果機器人也可以采用這樣的技術(shù),將會極大的提高其擬人化程度,并且?guī)Ыo用戶極佳的交流體驗。

為了實現(xiàn)這個目的,華為在5月8日申請了一項名為“一種機器人的控制方法、裝置、機器人以及存儲介質(zhì)”的發(fā)明專利(申請?zhí)枺?02010382291.0),申請人為華為技術(shù)有限公司。

根據(jù)該專利目前公開的資料,讓我們一起來看看華為的這項凝視追蹤技術(shù)吧。

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

如上圖,為該專利中發(fā)明的機器人示意圖,其中包括具有模擬人形形態(tài)的a型機器人、模擬動物形態(tài)的b型機器人以及非生物形態(tài)的c型機器人,這些機器人雖然形狀各異,但是均具有運動功能,可以進行移動以及旋轉(zhuǎn)等運動操作,其具體控制方法的實現(xiàn)如下圖所示。

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

可以看到,控制機器人運動的過程分為三步,首先需要獲取目標對象的位置信息,其次根據(jù)這個位置信息來控制機器人轉(zhuǎn)動。這個相對位置可以通過自動識別或者手動設置來確定,它是機器人與目標對象之間的相對位置,例如正前方、右側(cè)等,也可以是具體多少角度的偏轉(zhuǎn),例如+60度或者-120度等。

有了相對位置信息后,機器人會根據(jù)自身的初始角度以及目標對象的位姿確定目標偏轉(zhuǎn)角度,例如人形機器人可以以其面部為正面。為了實現(xiàn)凝視追蹤的目的,可以將目標偏轉(zhuǎn)角度設置為機器人看向的方向,這樣就可以使得機器人的視線對準目標對象,從而完成凝視追蹤。

并且值得一提的是,該專利采用顯示模塊的輸出畫面來完成凝視,這相比于馬達驅(qū)動的硬件凝視具有更高的響應度,利用這種模擬的凝視界面,可以很好的實現(xiàn)平滑凝視追蹤效果。

華為發(fā)明的機器人凝視追蹤方法,提高了機器人的擬人化程度

具體的應用案例如上圖所示,這是專利中提供的目標偏轉(zhuǎn)角度的獲取示意圖,左側(cè)為機器人,右側(cè)為真人,對于凝視追蹤而言,最重要的就是將機器人的視線與目標對象的視線進行交匯,即處于同一平面內(nèi),因此機器人需要確定自身當前的視線方向以及目標對象的視線方法,并且可以基于兩個視線方向確定偏轉(zhuǎn)角度。

該專利提供了三種技術(shù)用于確定這個偏轉(zhuǎn)角度:基于距離傳感器、基于拍攝圖像以及基于語音信號的方式?;诰嚯x傳感器的方法就是通過距離探測單元采集的距離值構(gòu)建機器人所處場景下的深度圖,基于深度圖來確定當前場景包含的對象,并根據(jù)目標的輪廓線來確定目標對象。

基于拍攝圖像的方法是通過輪廓識別算法提取該場景圖像內(nèi)包括的輪廓信息,并基于輪廓信息對場景圖像進行劃分,通過主體類型識別來確定目標對象。而基于語音信號的方法則是基于語音分析結(jié)果來確定是否有激活口令,通過口令來確定目標對象。

這三種方式都可以用于完成凝視追蹤,并且可以利用多種方法進行組合的方式來提高凝視追蹤的準確率。此外,基于拍攝圖像的方法還需要對攝像模塊上采集的圖像進行校準,從而在后續(xù)的凝視追蹤時,可以使得機器人的眼部視線偏移到目標對象的中心位置。

以上就是華為發(fā)明的機器人凝視追蹤方法,通過確定機器人與目標之間的偏轉(zhuǎn)角度,并不斷調(diào)整顯示模塊的輸出內(nèi)容以及旋轉(zhuǎn)部件來實現(xiàn)凝視追蹤。此外,該技術(shù)基于三種確定偏轉(zhuǎn)角度的方法,無需借助馬達來驅(qū)動硬件,響應時間較短,不僅實現(xiàn)了平滑凝視追蹤行為,也提高了機器人的擬人化程度。
責任編輯:YYX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人
    +關注

    關注

    210

    文章

    27839

    瀏覽量

    204594
  • 華為
    +關注

    關注

    215

    文章

    34128

    瀏覽量

    249460
收藏 人收藏

    評論

    相關推薦

    開源項目!用ESP32做一個可愛的無用機器人

    簡介 作者在完成碩士論文答辯后,利用空閑時間制作了一個他一直想做的機器人——可愛無用機器人。 無用機器人原理是一個連接到開關的電機,通過邏輯門控制。當開關被推到“開”時,機器人啟動
    發(fā)表于 09-03 09:34

    碼垛機器人投產(chǎn)優(yōu)勢及選用方法

    ?碼垛機器人自動化設備車間的投產(chǎn)帶來了多方面的顯著優(yōu)勢。?首先,?它大大提高了生產(chǎn)效率,?能夠在24小時內(nèi)不間斷地工作,?且速度和精度遠超人工,?從而縮短了生產(chǎn)周期?。?其次,?該設備顯著降低了企業(yè)
    的頭像 發(fā)表于 07-30 15:33 ?94次閱讀

    Al大模型機器人

    和迭代來不斷改進自身性能。它們可以從用戶交互中學習并根據(jù)反饋進行調(diào)整,以提高對話質(zhì)量和準確性。可定制性與整合性: AI大模型機器人可以根據(jù)特定需求進行定制和整合,以滿足不同場景和應用的要求。它們可以與其
    發(fā)表于 07-05 08:52

    abb機器人home點設置方法

    ABB機器人的home點設置是機器人編程和操作中非常重要的一環(huán),它關系到機器人的精度和穩(wěn)定性。本文將詳細介紹ABB機器人home點設置的方法
    的頭像 發(fā)表于 06-17 09:27 ?1614次閱讀

    基于FPGA EtherCAT的六自由度機器人視覺伺服控制設計

    和增強系統(tǒng)處理圖像的實時性,本文提出了一種伊瑟特的六自由度機器人視覺伺服控制系統(tǒng),將攝像頭集成到基于 Zynq的伊瑟特主站上,提高了視覺伺服的實時性.經(jīng)測試,該平臺能夠?qū)σ曈X檢測目標的變化做出及時的反應
    發(fā)表于 05-29 16:17

    其利天下技術(shù)·搭載無刷電機的掃地機器人的前景如何?

    大的吸力,有效清除各類污漬和顆粒物。同時,低噪音設計使得機器在工作時不會打擾到家庭成員的休息或工作。此外,無刷電機的壽命更長,減少了用戶的維護成本,提高了產(chǎn)品的性價比。 2.掃地機器人智能化
    發(fā)表于 05-05 15:03

    華為云在人形機器人領域展開合作

    華為云與人形機器人領域的創(chuàng)新企業(yè)樂聚機器人近日達成合作,共同致力于探索“華為盤古大模型+夸父人形機器人”的全新應用場景。這是
    的頭像 發(fā)表于 03-25 10:49 ?478次閱讀

    華為云攜手樂聚機器人,共探人形機器人智能新紀元

    近日,華為云計算技術(shù)有限公司與樂聚(深圳)機器人技術(shù)有限公司正式簽署戰(zhàn)略合作協(xié)議,標志著雙方將共同開拓“華為盤古大模型+夸父人形機器人”的全新應用場景。此舉不僅是
    的頭像 發(fā)表于 03-25 10:17 ?443次閱讀

    機器人焊接技術(shù)的應用與發(fā)展前景

    和更低的成本。今天創(chuàng)想焊縫跟蹤系統(tǒng)小編和大家一起探討機器人焊接技術(shù)的應用與發(fā)展前景。 ??一、機器人焊接技術(shù)的應用 ??機器人焊接技術(shù)的應用,使得焊接過程更加自動化、智能化,有效提高了
    的頭像 發(fā)表于 01-25 14:10 ?978次閱讀
    <b class='flag-5'>機器人</b>焊接技術(shù)的應用與發(fā)展前景

    LabVIEW的六軸工業(yè)機器人運動控制系統(tǒng)

    。LabVIEW的可視化編程環(huán)境和強大的數(shù)據(jù)處理能力,使得復雜的運動學算法和軌跡規(guī)劃得以順利實現(xiàn),顯著提高了工業(yè)機器人的控制精度和效率。 ? 這是LabVIEW的一個功能介紹,更多的使用方法與開發(fā)案例,歡迎登錄官網(wǎng),了解更多信息
    發(fā)表于 12-21 20:03

    機器人實現(xiàn)開發(fā)自由,探索精密工藝的機器人關節(jié)模組

    機器人關節(jié)是作為機器人各個部件之間相互連接的節(jié)點,提供了必要的運動自由度。關節(jié)模組用其精確度和可靠性,確保了機器人在各個領域的高效率和高質(zhì)量表現(xiàn)。一體化關節(jié)使得機器人能夠模
    的頭像 發(fā)表于 12-08 15:35 ?389次閱讀

    機器人建模方法和組成

    URDF:機器人建模方法 ROS是機器人操作系統(tǒng),當然要給機器人使用啦,不過在使用之前,還得讓ROS認識下我們使用的機器人,如何把一個
    的頭像 發(fā)表于 11-22 16:30 ?752次閱讀
    <b class='flag-5'>機器人</b>建模<b class='flag-5'>方法</b>和組成

    機器人阻抗控制有幾種方法

    在工業(yè)機器人中,阻抗控制是一種非常重要的控制方法,主要用于控制機器人的力和位。通過調(diào)整阻抗,機器人可以更好地適應不同的操作環(huán)境和任務需求。 阻抗控制的基本思路是:建立一個期望的
    的頭像 發(fā)表于 11-08 18:08 ?1227次閱讀
    <b class='flag-5'>機器人</b>阻抗控制有幾種<b class='flag-5'>方法</b>

    機器人編程需要什么軟件?

    機器人編程需要什么軟件
    發(fā)表于 11-01 07:34

    Arduino教學機器人的使用教程

    本文檔的主要內(nèi)容詳細介紹的是Arduino教學機器人的使用教程
    發(fā)表于 09-27 06:53