車載DMS：硬件改進和座艙監(jiān)控

部分 DMS 系統(tǒng)供應(yīng)商產(chǎn)品對比

來源：佐思汽研

DMS 算法廠商的崛起

DMS 的核心功能是監(jiān)測駕駛員的疲勞和注意力分散程度。但是基于更多的傳感器，視覺+紅外攝像頭，甚至毫米波雷達，可以實現(xiàn)更多的功能，譬如：人臉識別、年齡性別估計、情緒估計、安全帶檢測、姿勢位置、遺忘檢測、座艙異常情況檢測、幼兒檢測等。通過人臉、性別和表情的識別, 實現(xiàn)身份認證，以及更豐富的人車交互。目前 DMS 的應(yīng)用僅停留在預(yù)警階段，而一旦與 ADAS/AD 系統(tǒng)結(jié)合，還可以實現(xiàn)個性化車身控制等功能。

以法雷奧駕駛員監(jiān)控系統(tǒng)為例，它已經(jīng)實現(xiàn)了基于人工智能的，運用卷積神經(jīng)網(wǎng)絡(luò)算法，并帶情緒識別功能的系統(tǒng)，可以通過人臉識別實現(xiàn)駕駛員的個性化設(shè)置。

但是這些豐富的功能單靠 Tier1 在短期內(nèi)是無法完成的，所以 DMS 系統(tǒng)多數(shù)是靠 Tier1+算法企業(yè)合作實現(xiàn)的。

虹軟科技在計算機視覺技術(shù)方面有長期的積累，專門針對汽車行業(yè)視覺相關(guān)功能需求而開發(fā)了 DMS、ADAS、BSD 等產(chǎn)品。2019 年度，虹軟科技智能駕駛算法業(yè)務(wù)快速發(fā)展，實現(xiàn)營業(yè)收入 1605.66 萬元，較上年度 220.21 萬元實現(xiàn)大幅增長。2020 年一季度智能駕駛算法業(yè)務(wù)實現(xiàn)營業(yè)收入 1700.76 萬元，已超過 2019 年全年營收。

EyeSight、Smart Eye、FotoNation、Seeing Machine 等都是類似的軟件算法公司，并且均有好幾年的技術(shù)積累。即便如此，DMS 技術(shù)應(yīng)用中仍然面臨諸多難以解決的困難：

基于視覺的 DMS 在技術(shù)上的最大難點是面對強光或弱光狀態(tài)下的表現(xiàn)。光線太強，圖像表現(xiàn)出來全是白的。光線太弱，圖像表現(xiàn)出來全是黑的。面對這種情況，算法再強也沒有用。

如何量化界定疲勞狀態(tài)、瞌睡狀態(tài)也是 DMS 面臨的瓶頸。如何測量疲勞？疲勞與體溫，皮膚電阻，眼球運動，呼吸頻率，心率和大腦活動之間存在關(guān)系。最有效的方法是測量脈搏和心跳變異 HRV，但這方面技術(shù)還不夠成熟。

信噪比、對比度千差萬別、圖像的遮擋與抖動、不同天氣和時間段的光線差異導(dǎo)致圖像亮度不同。

人臉檢測的挑戰(zhàn)：面內(nèi)旋轉(zhuǎn)；面外旋轉(zhuǎn)；化妝品，胡須和眼鏡的存在；表情（快樂，哭泣等）；臉部遮擋；實時處理要求。

算力不足、通信等造成的 DMS 延時問題。

誤報次數(shù)太多，對用戶造成干擾。

訓(xùn)練算法的樣本數(shù)據(jù)庫太少。

視覺攝像頭解決不了的很多場景，業(yè)內(nèi)企業(yè)嘗試加入更多傳感器，引入更強大的芯片來解決。

硬件改進和座艙監(jiān)控

2019 年 5 月，豪威科技與富瀚微電子宣布推出聯(lián)合解決方案，可利用單個攝像頭，在白天和黑夜，抓取和處理高質(zhì)量的車內(nèi)彩色和紅外（IR）圖像。該解決方案結(jié)合了豪威的 OV2778 RGB-IR 圖像傳感器（像素為 200 萬）與富瀚的 FH8310 圖像信號處理器（ISP）。OV2778 圖像傳感器在所有照明條件下都具高靈敏度。該解決方案可為汽車座艙監(jiān)控系統(tǒng)（IMS）提供高質(zhì)量的視頻，同時可集成面部識別、物體和無人看管的小孩探測、遠程監(jiān)控以及網(wǎng)約車和 RoboTaxi 錄制等解決方案。

2019 年 6 月，以色列初創(chuàng)公司 Vayyar 推出了一款雷達芯片，可以實現(xiàn)車內(nèi)乘客的位置和分類、乘員的大小、生命體征和姿態(tài)分析。座艙內(nèi)的解決方案包括安全帶提醒、優(yōu)化的安全氣囊部署、手勢控制、司機睡意警報和嬰兒檢測警報。

2019 年 9 月，安森美半導(dǎo)體推出一套座艙監(jiān)控系統(tǒng)，其中將包括駕駛員監(jiān)控和乘員監(jiān)控功能。該方案包括安森美半導(dǎo)體的三個 230 萬像素的 RGB-IR 圖像傳感器。該多攝像頭座艙監(jiān)控系統(tǒng)采用了安霸公司的 CV2AQ 系統(tǒng)芯片，集成了 Eyeris 公司的 AI 軟件，能夠執(zhí)行復(fù)雜的身體和面部分析、乘客活動檢測和目標探測等任務(wù)。

2020 年 2 月，ADI 宣布與 Jungo 合作開發(fā)基于 ToF 和 2D 紅外技術(shù)的攝像頭解決方案，以實現(xiàn)車內(nèi)駕駛員及座艙監(jiān)測。ADI 的 ToF 技術(shù)和 Jungo 的 CoDriver 軟件相結(jié)合，通過觀察頭部、身體位置以及眼睛注視情況，監(jiān)測車內(nèi)人員的睡意和注意力分散程度。

法雷奧也推出了座艙監(jiān)控技術(shù)，如基于視覺技術(shù)的后排監(jiān)控方案和基于毫米波雷達的活體檢測方案。

EyeSight 的 Cabin Sense 艙內(nèi)監(jiān)控解決方案，包括檢測乘客的數(shù)量、乘客是否系安全帶、監(jiān)測乘客姿勢，以及是否有被遺留在車內(nèi)的兒童或包等物體。

總之，DMS 在近幾年將隨著 L2/L3 的大規(guī)模應(yīng)用而保持高速成長，未來將演進為座艙監(jiān)控系統(tǒng)，即使在 L4 時代也將發(fā)揮重要的作用。

編輯：hfy