計(jì)算機(jī)視覺(jué)的發(fā)展將能夠有效提高多媒體系統(tǒng)的性能

2020年10月12-16日，多媒體領(lǐng)域的國(guó)際頂級(jí)會(huì)議ACM MM 2020在美國(guó)西雅圖舉行，深蘭科技再傳捷報(bào)，獲得了Video Relation Understanding競(jìng)賽/視頻目標(biāo)檢測(cè)任務(wù)的第一名，以及異常事件檢測(cè)挑戰(zhàn)賽/常規(guī)異常事件檢測(cè)任務(wù)的第三名。此次獲獎(jiǎng)方案均對(duì)現(xiàn)實(shí)應(yīng)用場(chǎng)景有著實(shí)際意義，將有效提升自動(dòng)駕駛、安防監(jiān)控等領(lǐng)域的安全性。

盡管計(jì)算機(jī)視覺(jué)的最新進(jìn)展有效地提高了多媒體系統(tǒng)的性能，但仍然不能明確回答一個(gè)核心問(wèn)題：機(jī)器是否理解視頻中發(fā)生的事情，分析結(jié)果是否可以被人類(lèi)用戶(hù)解釋?zhuān)繛榱送苿?dòng)上述問(wèn)題的研究，新加坡國(guó)立大學(xué)推出了VidOR數(shù)據(jù)集，同時(shí)在ACM MM 2020上舉辦了Video Relation Understanding競(jìng)賽。視頻目標(biāo)檢測(cè)（Video Object Detection）作為競(jìng)賽任務(wù)，要求參與者開(kāi)發(fā)魯棒的目標(biāo)檢測(cè)器，在每個(gè)視頻幀中使用檢測(cè)框定位目標(biāo)，并將指示同一目標(biāo)實(shí)體的檢測(cè)框鏈接到軌跡中，這將幫助機(jī)器在視頻級(jí)別上理解目標(biāo)實(shí)體的身份和動(dòng)態(tài)，還可以使需要細(xì)粒度視頻理解的許多應(yīng)用程序受益（舉例），還包括自動(dòng)駕駛場(chǎng)景中對(duì)車(chē)身周?chē)鷦?dòng)態(tài)目標(biāo)的有效檢測(cè)，可提高駕駛安全性。

深蘭科技DeepBlueAI團(tuán)隊(duì)面對(duì)諸多難點(diǎn)，包括檢測(cè)器需要重新識(shí)別視頻中消失重現(xiàn)的目標(biāo)；畫(huà)面劇烈抖動(dòng)；視頻分辨率較低，存在照明、模糊、物體外形發(fā)生變化；目標(biāo)類(lèi)別多及目標(biāo)類(lèi)別不均衡；很多非人工標(biāo)注信息不準(zhǔn)確等。經(jīng)過(guò)分析，團(tuán)隊(duì)采用了目標(biāo)檢測(cè)+多目標(biāo)跟蹤的解決思路，通過(guò)檢測(cè)器設(shè)計(jì)、深度度量學(xué)習(xí)模型設(shè)計(jì)與多目標(biāo)跟蹤算法實(shí)現(xiàn)構(gòu)建了解決方案，最終戰(zhàn)勝三星、廈門(mén)大學(xué)等團(tuán)隊(duì)斬獲第一。

而獲得第三的異常事件檢測(cè)挑戰(zhàn)賽/常規(guī)異常事件檢測(cè)任務(wù)，更具現(xiàn)實(shí)意義，在城市管理、公共安全、交通控制和環(huán)境保護(hù)等方面起著關(guān)鍵作用。任務(wù)包含1000多個(gè)未修剪的真實(shí)視頻，需要識(shí)別爭(zhēng)吵，打架，搶劫，偷竊，爆炸，道路事故等近二十種異常事件。深蘭科技的明星產(chǎn)品“熊貓智能公交車(chē)” 就有多個(gè)功能獲益于這些獲獎(jiǎng)方案，除了領(lǐng)先的自動(dòng)駕駛技術(shù)，車(chē)內(nèi)還打造了“智能客艙”，其中的“異常行為識(shí)別系統(tǒng)”就包括了車(chē)廂內(nèi)摔倒、偷盜等行為報(bào)警等功能。

近日，深蘭科技的自動(dòng)駕駛產(chǎn)品喜訊頻傳，熊貓智能公交車(chē)在上海臨港新片區(qū)正式啟動(dòng)測(cè)試、在遼寧鞍山正式投入運(yùn)行；AI智能掃路機(jī)在上海長(zhǎng)寧正式啟動(dòng)無(wú)人駕駛模式的保潔作業(yè)；熊貓智能公交車(chē)和AI智能掃路機(jī)還分別獲得，湖北國(guó)際物流機(jī)場(chǎng)頒發(fā)的“無(wú)人駕駛擺渡車(chē)組第一名”，以及“無(wú)人駕駛清掃組第一名”的獎(jiǎng)狀，有望在該機(jī)場(chǎng)運(yùn)行并提供服務(wù)。而這些落地應(yīng)用背后的保障正是在國(guó)際頂會(huì)競(jìng)賽上獲獎(jiǎng)的實(shí)力，以及對(duì)科研的敬畏。深蘭科技將秉持人工智能服務(wù)民生的理念，穩(wěn)步推進(jìn)基礎(chǔ)研究和落地應(yīng)用，為百姓生活造福、為經(jīng)濟(jì)發(fā)展出力。
fqj