0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

傳感技術(shù)進(jìn)一步擴(kuò)大環(huán)境感知的應(yīng)用機(jī)會(huì)

CEVA ? 來源:CEVA ? 作者:CEVA ? 2021-09-18 10:21 ? 次閱讀

移動(dòng)計(jì)算推動(dòng)了產(chǎn)品機(jī)會(huì)的爆發(fā)——智能手機(jī)、可穿戴設(shè)備、可聽設(shè)備、運(yùn)動(dòng)相機(jī)等等。傳感技術(shù)將進(jìn)一步擴(kuò)大必須具有環(huán)境感知的應(yīng)用機(jī)會(huì)?,F(xiàn)在,對(duì)于運(yùn)輸、機(jī)器人、家庭自動(dòng)化、智能城市、工廠和倉(cāng)庫管理中許多可能的應(yīng)用來說,通過視覺、雷達(dá)或激光雷達(dá)傳感來進(jìn)行物體識(shí)別和碰撞警告,通過超聲波傳感器實(shí)現(xiàn)短距離的接近偵測(cè),通過IMU進(jìn)行運(yùn)動(dòng)和姿勢(shì)檢測(cè),基于聲學(xué)的危險(xiǎn)聲音檢測(cè)已經(jīng)很普遍了。說實(shí)話,這個(gè)清單是無窮無盡的。我們擁有建立一個(gè)由智能傳感驅(qū)動(dòng)的未來主義的、幾乎是科幻小說的世界所需要的所有原材料。但是怎么做呢?

從感知到運(yùn)動(dòng)

想一想一個(gè)在機(jī)場(chǎng)周圍移動(dòng)的機(jī)器人助手。幫助乘客辦理登機(jī)手續(xù),找到他們的登機(jī)口,獲得航班的詳細(xì)信息。這個(gè)機(jī)器人必須在機(jī)場(chǎng)內(nèi)自由移動(dòng),不能撞到在各個(gè)方向行走或奔跑的人,或可能是靜止的或有時(shí)可能移動(dòng)的物體。這個(gè)機(jī)器人助手應(yīng)該知道如何在一個(gè)不斷變化的環(huán)境中進(jìn)行智能導(dǎo)航。而且,它必須在一定的可能性范圍內(nèi),能夠理解并響應(yīng)自然語言的語音命令。我們將在下面討論這個(gè)問題。

光學(xué)和接近傳感器是智能導(dǎo)航技術(shù)的一個(gè)起點(diǎn)。這些傳感器信息輸入到一個(gè)被稱為SLAM的復(fù)雜算法中,并生成一個(gè)不斷移動(dòng)變化的的空間的點(diǎn)陣云圖且隨之變化更新。弱光條件下,SLAM技術(shù)正越來越多地被航位推算所加強(qiáng),因?yàn)樵谌豕鈼l件下,光學(xué)的效果較差。這種方法從一個(gè)已知的位置追蹤運(yùn)動(dòng),從車輪運(yùn)動(dòng)、加速計(jì)和其他傳感器中獲取信息。同時(shí),接近傳感器提供輸入,避免撞上一個(gè)物體或一個(gè)人。我們已經(jīng)有多個(gè)傳感器向算法提供信息,以構(gòu)建地圖和定位機(jī)器人助手在地圖中的位置。

基于攝像頭的SLAM需要高精度的線性方程求解,矢量DSP平臺(tái)很適合?;诔暡ǖ慕咏袦y(cè)必須從降噪開始,在回聲和其他雜波中定位最近的物體,然后進(jìn)行范圍(和方向)計(jì)算。這種信號(hào)處理非常適合于標(biāo)量DSP。

從聲音到行動(dòng)

一位乘客看到一個(gè)助手,就叫它過來:“嘿,Airbot!” 首先,助理必須識(shí)別這個(gè)命令和它的來源。這一步需要一些復(fù)雜的音頻處理,尤其是在機(jī)場(chǎng)航站樓這樣的嘈雜環(huán)境中。識(shí)別觸發(fā)語音命令是任何智能音箱中都會(huì)有的基本人工智能。機(jī)器人還可以通過beamforming“”波束成形技術(shù)檢測(cè)語音命令的來源方向。這個(gè)技術(shù)需要更多的信號(hào)處理,從多個(gè)麥克風(fēng)在稍微不同的時(shí)間檢測(cè)到的識(shí)別命令中找出方向。

我們的機(jī)器人助手”滑行”到乘客身邊,沿途避開其他障礙物,在幾英尺遠(yuǎn)的地方停下來,問道:“我能為你做些什么?” 它在屏幕上展示了一系列它知道如何回答的問題,然后乘客說,“我想辦理登機(jī)手續(xù)”。我們的機(jī)器人首先必須做一些更多的信號(hào)處理,以減少該音頻信號(hào)的噪音,部分通過波束成形,部分通過回聲消除。然后,它必須識(shí)別這個(gè)命令。

自然語言處理(NLP)可以在云端處理,但機(jī)場(chǎng)網(wǎng)絡(luò)有很大的負(fù)荷。因此,NLP必須在本地處理,以便快速響應(yīng)。機(jī)器人應(yīng)快速響應(yīng),以提供令人滿意的用戶體驗(yàn)。它要求乘客直接看著它的屏幕,拍一張照片,然后要求乘客插入一個(gè)圖片ID,如護(hù)照身份頁。然后它可以比較這些圖片以增加安全性,這需要一個(gè)強(qiáng)大的可編程神經(jīng)網(wǎng)絡(luò)引擎。

辦理登機(jī)手續(xù)的剩余步驟?那就有傳統(tǒng)的嵌入式處理就夠了。

將一切結(jié)合起來

智能傳感設(shè)備必須使用一個(gè)支持同時(shí)處理多個(gè)傳感器的平臺(tái)。它應(yīng)該為前端信號(hào)處理提供強(qiáng)大的標(biāo)量DSP支持,為基于圖像的計(jì)算和SLAM提供矢量DSP支持。對(duì)語音和視覺人工智能的神經(jīng)網(wǎng)絡(luò)支持,也是一個(gè)矢量DSP,但對(duì)神經(jīng)網(wǎng)絡(luò)有特殊的擴(kuò)展,同時(shí)在SDK中有豐富的軟件編譯器和庫,為你提供這些技術(shù)領(lǐng)域的所有基礎(chǔ)支持。

CEVA的 “SensPro2 ”是傳感平臺(tái)提供動(dòng)力的方案之一。基于CEVA在視覺、音頻、SLAM和人工智能方面的強(qiáng)大背景,SensPro2是一款用于多任務(wù)傳感和多傳感器的人工智能(包括攝像頭、雷達(dá)、激光雷達(dá)、飛行時(shí)間、麥克風(fēng)和慣性測(cè)量單元)的高度可擴(kuò)展和增強(qiáng)的第二代高性能傳感器控制中心SensorHub DSP。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 傳感器
    +關(guān)注

    關(guān)注

    2541

    文章

    49961

    瀏覽量

    747482
  • 智能手機(jī)
    +關(guān)注

    關(guān)注

    66

    文章

    18331

    瀏覽量

    178727
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    210

    文章

    27838

    瀏覽量

    204592

原文標(biāo)題:傳感器,到處都是傳感器。現(xiàn)在我該怎么辦?

文章出處:【微信號(hào):CEVA-IP,微信公眾號(hào):CEVA】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    英特爾將進(jìn)一步分離芯片制造和設(shè)計(jì)業(yè)務(wù)

    面對(duì)公司成立50年來最為嚴(yán)峻的挑戰(zhàn),英特爾宣布了項(xiàng)重大戰(zhàn)略調(diào)整,旨在通過進(jìn)一步分離芯片制造與設(shè)計(jì)業(yè)務(wù),重塑競(jìng)爭(zhēng)力。這決策標(biāo)志著英特爾在應(yīng)對(duì)行業(yè)變革中的堅(jiān)定步伐。
    的頭像 發(fā)表于 09-19 16:48 ?117次閱讀

    通過展頻進(jìn)一步優(yōu)化EMI

    電子發(fā)燒友網(wǎng)站提供《通過展頻進(jìn)一步優(yōu)化EMI.pdf》資料免費(fèi)下載
    發(fā)表于 09-04 09:32 ?0次下載
    通過展頻<b class='flag-5'>進(jìn)一步</b>優(yōu)化EMI

    芯馳科技與IAR宣布進(jìn)一步擴(kuò)大合作

    全球領(lǐng)先的嵌入式系統(tǒng)開發(fā)軟件解決方案供應(yīng)商IAR與全場(chǎng)景智能車芯引領(lǐng)者芯馳科技宣布進(jìn)一步擴(kuò)大合作,最新版IAR Embedded Workbench for Arm已全面支持芯馳科技的E3119
    的頭像 發(fā)表于 07-11 15:55 ?435次閱讀

    西門子與微軟進(jìn)一步擴(kuò)展戰(zhàn)略合作關(guān)系

    近日,西門子數(shù)字化工業(yè)軟件與微軟宣布進(jìn)一步擴(kuò)展雙方的戰(zhàn)略合作關(guān)系。通過微軟Azure云服務(wù),西門子正式推出Xcelerator as a Service工業(yè)軟件解決方案,為客戶提供更靈活、高效的服務(wù)體驗(yàn)。
    的頭像 發(fā)表于 05-21 10:47 ?551次閱讀

    進(jìn)一步解讀英偉達(dá) Blackwell 架構(gòu)、NVlink及GB200 超級(jí)芯片

    新的標(biāo)準(zhǔn)。Blackwell架構(gòu)和GB200 超級(jí)芯片有望推動(dòng)英偉達(dá)在人工智能領(lǐng)域更進(jìn)一步,鞏固其在高性能計(jì)算和人工智能技術(shù)領(lǐng)域的領(lǐng)先地位。隨著亞馬遜網(wǎng)絡(luò)服務(wù)、谷歌云和微軟 Azure 等公司開始整合這些新系統(tǒng),英偉達(dá)創(chuàng)新的影響將進(jìn)一步
    發(fā)表于 05-13 17:16

    卓馭科技與高通合作宣布進(jìn)一步推動(dòng)汽車行業(yè)智能駕駛技術(shù)的發(fā)展

    今日,深圳市卓馭科技有限公司(以下簡(jiǎn)稱:卓馭科技)與高通技術(shù)公司宣布擴(kuò)展雙方的技術(shù)合作,利用基于Snapdragon Ride平臺(tái)的全新智能駕駛產(chǎn)品,進(jìn)一步推動(dòng)汽車行業(yè)智能駕駛技術(shù)的發(fā)
    的頭像 發(fā)表于 04-25 16:25 ?1483次閱讀
    卓馭科技與高通合作宣布<b class='flag-5'>進(jìn)一步</b>推動(dòng)汽車行業(yè)智能駕駛<b class='flag-5'>技術(shù)</b>的發(fā)展

    Arbe在中國(guó)上海設(shè)立分公司,進(jìn)一步增強(qiáng)企業(yè)影響力

    摘要:中國(guó)團(tuán)隊(duì)將進(jìn)一步促進(jìn)Arbe與中國(guó)市場(chǎng)重要企業(yè)之間的緊密合作。 新代4D成像雷達(dá)解決方案的頭部企業(yè)Arbe Robotics(納斯達(dá)克股票代碼:ARBE;以下稱Arbe)近日宣布已在上海設(shè)立
    的頭像 發(fā)表于 03-25 09:44 ?334次閱讀

    材料價(jià)格進(jìn)一步下降,盈利觸底 鋰電材料企業(yè)如何應(yīng)對(duì)?

    在上游原料價(jià)格相對(duì)穩(wěn)定、終端銷量有所好轉(zhuǎn)的情況下,季度四大鋰電主材價(jià)格卻出現(xiàn)進(jìn)一步下跌。
    的頭像 發(fā)表于 03-01 10:25 ?758次閱讀

    MediaTek宣布將進(jìn)一步深化與海信的長(zhǎng)期合作關(guān)系

    MediaTek 宣布將進(jìn)一步深化與海信的長(zhǎng)期合作關(guān)系。海信率先采用了 MediaTek Pentonic 智能電視芯片,顯著提升了流媒體內(nèi)容的畫質(zhì)表現(xiàn)。自 2024 年起,MediaTek AI 超級(jí)分辨率技術(shù)(AI-SR)將應(yīng)用于海信全系列智能電視產(chǎn)品。
    的頭像 發(fā)表于 01-12 09:37 ?676次閱讀

    三星攜手紅帽進(jìn)一步擴(kuò)大CXL存儲(chǔ)生態(tài)系統(tǒng)

    2023年12月27日——三星宣布,與開源軟件提供商紅帽(Red Hat)攜手,首次成功在真實(shí)用戶環(huán)境中驗(yàn)證了Compute Express Link(CXL)內(nèi)存技術(shù)的運(yùn)行,這將進(jìn)一步擴(kuò)大
    的頭像 發(fā)表于 12-27 10:34 ?484次閱讀

    有什么方法可以進(jìn)一步提高AD7714的分辨率啊?

    級(jí)放大再加給AD7714時(shí),測(cè)得人分辨率還要低些。由于是用干電池得到AD7714的輸入信號(hào),該信號(hào)相對(duì)來說很穩(wěn)定,而且板上的噪聲也不是太大。請(qǐng)問各位大蝦,還有什么方法可以進(jìn)一步提高AD7714的分辨率?。坎粍俑屑?!
    發(fā)表于 12-25 06:33

    借助人工智能,存儲(chǔ)器比重將進(jìn)一步增加

    SK海力士預(yù)測(cè)在人工智能(AI)領(lǐng)域,存儲(chǔ)器解決方案的比重將進(jìn)一步增加,可以通過類似AiMX的解決方案部分替代圖形處理單元(GPU)。
    發(fā)表于 12-04 09:52 ?329次閱讀
    借助人工智能,存儲(chǔ)器比重將<b class='flag-5'>進(jìn)一步</b>增加

    ad9106如何將波形頻率設(shè)置為進(jìn)一步降低到10Hz?

    你好,我有個(gè)小問題。我使用100m時(shí)鐘芯片。每個(gè)時(shí)鐘只有10ns,ad9106寄存器的最小輸出波形只有100Hz。如何將波形頻率設(shè)置為進(jìn)一步降低到10Hz?我已將配置設(shè)置為相關(guān)寄存器的最大值。拍
    發(fā)表于 12-01 06:12

    請(qǐng)問如何進(jìn)一步減小DTC控制系統(tǒng)的轉(zhuǎn)矩脈動(dòng)?

    如何進(jìn)一步減小DTC控制系統(tǒng)的轉(zhuǎn)矩脈動(dòng)?
    發(fā)表于 10-18 06:53

    STM8在待機(jī)模式如何進(jìn)一步降低功耗?

    有什么方法可以進(jìn)一步降低待機(jī)模式的功耗
    發(fā)表于 10-12 07:23