瑞薩電子推出能處理多個(gè)攝像頭圖像數(shù)據(jù)的全新RZ/V2MA器件

全球半導(dǎo)體解決方案供應(yīng)商瑞薩電子（TSE：6723）今日宣布，推出一款能夠處理多個(gè)攝像頭圖像數(shù)據(jù)的全新RZ/V2MA器件，進(jìn)一步擴(kuò)充其RZ/V系列微處理器（MPU）產(chǎn)品線，并為視覺(jué)AI應(yīng)用帶來(lái)新水平的高精度圖像識(shí)別能力。該新器件集成了兩個(gè)64位Arm Cortex-A53內(nèi)核，能夠以1GHz的最高工作頻率提供高計(jì)算性能；具備專有的低功耗DRP-AI（動(dòng)態(tài)可重構(gòu)處理器）加速器，可以以1 TOPS/W（每秒百萬(wàn)次操作/瓦）級(jí)的性能處理圖像數(shù)據(jù)。

RZ/V2MA器件配備以太網(wǎng)、USB和PCI Express等高速接口，允許從多個(gè)外部攝像頭輸入圖像。除DRP-AI加速器外，RZ/V2MA還包含一個(gè)OpenCV加速器，以便同時(shí)執(zhí)行基于規(guī)則的圖像處理。這些功能讓AI網(wǎng)關(guān)、視頻服務(wù)器、安全門、POS終端和機(jī)械臂等機(jī)器視覺(jué)產(chǎn)品獲得高精度圖像識(shí)別能力。

新款RZ/V2MA配有一整套開(kāi)發(fā)工具來(lái)輔助視覺(jué)AI系統(tǒng)設(shè)計(jì)。除現(xiàn)有DRP-AI Translator，新器件還增加了基于開(kāi)源深度學(xué)習(xí)編譯器Apache TVM技術(shù)（注1）的DRP-AI TVM（注2）。DRP AI Translator旨在將AI模型轉(zhuǎn)換為DRP-AI可執(zhí)行文件，而DRP-AI TVM編譯器則讓DRP-AI加速器與CPU一起工作，使DRP-AI能夠轉(zhuǎn)換和生成比以往更多的AI模型。瑞薩針對(duì)產(chǎn)業(yè)發(fā)展的第一階段提供對(duì)ONNX和PyTorch AI模型的支持，并計(jì)劃在未來(lái)支持Tensorflow。

瑞薩電子企業(yè)基礎(chǔ)設(shè)施業(yè)務(wù)部副總裁加藤茂樹表示：“對(duì)于想要實(shí)現(xiàn)機(jī)器學(xué)習(xí)的嵌入式系統(tǒng)開(kāi)發(fā)人員而言，所面對(duì)的挑戰(zhàn)之一是如何跟上不斷演進(jìn)的最新AI模型。通過(guò)新款DRP-AI TVM工具，瑞薩為設(shè)計(jì)者帶來(lái)擴(kuò)展AI框架和AI模型的選擇。這些框架和模型可轉(zhuǎn)換為可執(zhí)行格式，使他們能夠利用新的AI模型為嵌入式設(shè)備構(gòu)建最前沿的圖像識(shí)別功能。”

物聯(lián)網(wǎng)和基于AI的服務(wù)提供商、橫河電機(jī)全資子公司amnimo Inc.總裁Chiharu Nakabayashi表示：“瑞薩RZ/V系列是嵌入式設(shè)備的理想選擇。其在運(yùn)行AI時(shí)僅產(chǎn)生極低的功耗和熱量，因而無(wú)需風(fēng)扇或散熱器。借助這些器件，我們有信心開(kāi)發(fā)出可安裝在任何場(chǎng)合的強(qiáng)大圖像AI網(wǎng)關(guān)?！?/p>

RZ/V2MA的關(guān)鍵特性

雙64位Arm Cortex-A53內(nèi)核，最大工作頻率為1GHz

AI加速器DRP-AI（1 TOPS/W級(jí)），在執(zhí)行TinyYoloV3程序時(shí)達(dá)到52 fps（每秒幀數(shù)）

OpenCV加速器，用于基于規(guī)則的圖像處理

以太網(wǎng)、USB和PCI Express接口，用于外部攝像頭圖像輸入

視頻編解碼器（H.265和H.264）

DRP-AI TVM工具，用于轉(zhuǎn)換基于TVM技術(shù)的AI模型；目前階段支持ONNX和PyTorch格式

高速內(nèi)存接口包括LPDDR4（3200Mbps）、USB 3.1（高達(dá)5Gbps）和PCI Express（2通道）

可采用15mm方形BGA封裝

基于RZ/V2MA的視覺(jué)AI網(wǎng)關(guān)解決方案

瑞薩開(kāi)發(fā)的“視覺(jué)AI網(wǎng)關(guān)解決方案”作為一款基于AI的對(duì)象檢測(cè)與識(shí)別平臺(tái)，使用多個(gè)攝像頭來(lái)收集數(shù)據(jù)并獲得有效的無(wú)線數(shù)據(jù)傳輸。這一高速處理解決方案融合了RZ/V2MA MPU與電源IC、VersaClock時(shí)鐘發(fā)生器，以及用于Wi-Fi、藍(lán)牙和LTE的通信模塊等相搭配的瑞薩產(chǎn)品，不僅帶來(lái)靈活的連接選項(xiàng)和一個(gè)優(yōu)化的電源系統(tǒng)，并且經(jīng)過(guò)測(cè)試，以加速?gòu)?qiáng)大AI網(wǎng)關(guān)設(shè)備的開(kāi)發(fā)。該解決方案作為瑞薩“成功產(chǎn)品組合”的一部分，將相互兼容的瑞薩器件完美結(jié)合，實(shí)現(xiàn)無(wú)縫協(xié)作，以幫助用戶縮短設(shè)計(jì)過(guò)程，加速產(chǎn)品上市。基于其產(chǎn)品陣容中的多款產(chǎn)品，瑞薩現(xiàn)已推出超過(guò)300款“成功產(chǎn)品組合”。