肇觀電子產(chǎn)品總監(jiān)袁海先生受邀參加于10月在深圳舉辦的“智能無(wú)人機(jī)暨無(wú)人機(jī)反制技術(shù)應(yīng)用論壇”,并就【3D+AI視覺(jué)芯片讓無(wú)人機(jī)更加聰明懂“視”】發(fā)表主題演講。
在20世紀(jì)的最后10年,隨著視覺(jué)影像電子化跟數(shù)字化的落地,人們通過(guò)模式識(shí)別去解決工業(yè)場(chǎng)景下各類(lèi)的故障檢出和異常檢出,這一點(diǎn)是被普遍認(rèn)為在視覺(jué)領(lǐng)域感知能力的起點(diǎn)。隨著21世紀(jì)計(jì)算能力的增強(qiáng),包括圖像數(shù)字化能力的改善,該類(lèi)的應(yīng)用逐步從工業(yè)領(lǐng)域往安防和農(nóng)業(yè)等各個(gè)行業(yè)進(jìn)行快速的演進(jìn)跟落地。 當(dāng)今到了21世紀(jì)的第二個(gè)10年,可以看到隨著神經(jīng)網(wǎng)絡(luò)模型的快速部署和成熟,特別是安防領(lǐng)域,大量通過(guò)模型完成對(duì)人體和人臉的識(shí)別追蹤與故障物的檢測(cè)分類(lèi)等,極大加強(qiáng)了安防領(lǐng)域?qū)σ曈X(jué)感知的能力要求,同時(shí)在云端、邊端和端側(cè)都提出不同的算力要求。無(wú)人機(jī)作為一個(gè)自主可控、自主可飛、集群可飛等在復(fù)雜場(chǎng)景下具有自主飛行能力的機(jī)器人設(shè)備,對(duì)于整體環(huán)境的3D感知和對(duì)場(chǎng)景的理解都提出了更高程度的要求。
讓無(wú)人機(jī)能夠更好的滿足對(duì)環(huán)境的整體感知的能力,肇觀電子以D系列自研芯片為基礎(chǔ),推出了一攬子的前端算力加速方案,為客戶盡早的打通整條技術(shù)線,同時(shí)以極優(yōu)的成本與性能比,配合客戶在不同產(chǎn)品平臺(tái)上的方案落地。以此為基礎(chǔ),肇觀的五大技術(shù)方案可以充分應(yīng)對(duì)無(wú)人機(jī)市場(chǎng)的綜合性訴求。
3D雙目深度
01
肇觀以自研芯片獨(dú)立的硬件Depth引擎,能夠提供最高VGA120幀的深度計(jì)算能力,滿足無(wú)人機(jī)從320至800P不同分辨率等級(jí)下的3D深度計(jì)算能力。同時(shí)可支持多組雙目模組并行深度計(jì)算,以及提供豐富的后處理算法,針對(duì)不同的使用場(chǎng)景做對(duì)應(yīng)的異常場(chǎng)景的過(guò)濾與處理。
多目接入
02
肇觀芯片可以直接支持4路攝像頭的接入,并且可以通過(guò)集線器或密集的數(shù)據(jù)通道方式完成更多組攝像頭的同時(shí)接入和分時(shí)接入,能夠提供完整多目硬件幀同步的檢測(cè)與同步能力。
VIO加速
03
為了應(yīng)對(duì)整體無(wú)人機(jī)對(duì)自身位姿和位置能力的感知和計(jì)算的加速要求,肇觀提供了支持眾多OpenCV的前置算力與前置模型,并且提供了特征點(diǎn)加光流的一體化方案,供無(wú)人機(jī)快速的完成整個(gè)VIO計(jì)算的加速處理。
AI
04
為了更好的理解無(wú)人機(jī)所看到的場(chǎng)景以及現(xiàn)場(chǎng)的各種情況,肇觀內(nèi)置的NPU引擎,配合DSP算力,能夠?yàn)榭蛻籼峁┤可窠?jīng)網(wǎng)絡(luò)模型的部署,并且支持INT8跟FP16的混合算力支持。
畫(huà)質(zhì)
05
針對(duì)無(wú)人機(jī)在遠(yuǎn)距離、夜晚、逆光等各種復(fù)雜光線場(chǎng)景下的圖像和視頻采集需求,肇觀可以提供高質(zhì)量的圖像和視頻效果,支持低延時(shí)的4K30FPS的H.265的實(shí)時(shí)視頻流的存儲(chǔ)和4G/Wi-Fi圖傳。
自標(biāo)定
06
針對(duì)無(wú)人機(jī)出現(xiàn)易損、易跌落后解決快速修復(fù)現(xiàn)實(shí)場(chǎng)景的問(wèn)題,肇觀提供了自標(biāo)定的完整的功能,可以供客戶完成設(shè)備層面的功能整合,為無(wú)人機(jī)在現(xiàn)場(chǎng)的管損和快速修復(fù)提供了實(shí)戰(zhàn)化的基礎(chǔ),最終能夠?yàn)闊o(wú)人機(jī)提供像素和亞像素級(jí)別的校準(zhǔn)能力。
肇觀電子作為一家國(guó)內(nèi)新興的智能芯片設(shè)計(jì)及視覺(jué)模組廠商,致力于以自研AI視覺(jué)芯片為基礎(chǔ)打造為各類(lèi)智慧設(shè)備、移動(dòng)設(shè)備、機(jī)器人提供核心的感知能力。肇觀電子由衷感謝本次深圳無(wú)人機(jī)協(xié)會(huì)的邀請(qǐng),期待與行業(yè)專家和企業(yè)更加深入的交流與合作。
審核編輯:彭菁
-
芯片
+關(guān)注
關(guān)注
450文章
49674瀏覽量
417356 -
無(wú)人機(jī)
+關(guān)注
關(guān)注
226文章
10205瀏覽量
177585 -
肇觀電子
+關(guān)注
關(guān)注
0文章
7瀏覽量
2682
原文標(biāo)題:用“芯”看世界-肇觀電子亮相DC World 2023|智能安防無(wú)人機(jī)論壇
文章出處:【微信號(hào):肇觀電子NextVPU,微信公眾號(hào):肇觀電子NextVPU】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論