瑞薩隆重推出RZ/V2H這一款嵌入式AI微處理器

日益增長的AI應(yīng)用中，對AI處理器的算力和能效提出了更高要求，用于滿足復(fù)雜的AI運(yùn)用。

瑞薩隆重推出RZ/V2H這一款嵌入式AI微處理器，采用瑞薩最新的DRP-AI3技術(shù)，可提供高達(dá)8TOPS（dense模型）/80TOPS（sparse模型）的AI推理能力，以及10 TOPS/W 的高能效。它既滿足處理復(fù)雜的實(shí)時(shí)物體識(shí)別及推理，同時(shí)功耗可與傳統(tǒng)的嵌入式MPU相媲美，無需冷卻風(fēng)扇，這正是目前AI應(yīng)用市場急切需要的。

除了用于Linux的Arm Cortex-A55（1.8GHz）四核CPU外，RZ/V2H還嵌入了具有高實(shí)時(shí)性能的Cortex-R8（800MHz），從而可以開發(fā)機(jī)器人設(shè)備、自動(dòng)導(dǎo)引車（AGV）等對實(shí)時(shí)性要求復(fù)雜的應(yīng)用。

RZ/V2H已上市，并提供完善的開發(fā)套件，包含RZ/V2H開發(fā)板及AI開發(fā)的環(huán)境和軟件工具。

RZ/V2H框圖

主要特征

1

CPU：7核

■ Cortex-A55 （1.8GHz） x 4核

■ Cortex-R8 （800MHz） x 2核

■ Cortex-M33 （200MHz） x 1核

2

AI 推理與圖形加速器

■ AI加速器DRP-AI3

■ 動(dòng)態(tài)可重構(gòu)處理器（DRP）

3

圖形視頻處理

■ MIPI CSI-2 4L攝像頭接口4路

■ Arm Mali-C55 ISP 4K

■ H.264/265編解碼

■ Mali-G31 GPU

■ MIPI DSI 4L顯示輸出

4

高速接口

■ 64位LPDDR4/LPDDR4X內(nèi)存接口

■ 千兆以太網(wǎng)2路

■ USB3.2（Gen2）接口 2ch（僅限主機(jī)）

■ PCIe接口（Gen3/4通道）1通道

■ CAN接口（CAN-FD）6ch

5

封裝

■ 19x19mm 1368引腳BGA 0.5mm間距

產(chǎn)品優(yōu)勢

■ 瑞薩最新的DRP-AI3加速器，最高可達(dá)8TOPS（Dense 模型）/80 TOPS（Sparse模型）

■ 高能效的DRP-AI3無需風(fēng)扇，降低了冷卻組件和系統(tǒng)成本

■ 4路攝像頭，支持ISP處理

■ 高實(shí)時(shí)性CPU，實(shí)現(xiàn)AI與控制的高級協(xié)同

■ DRP加速了OpenCV等傳統(tǒng)圖像處理

DRP-AI3加速器

DRP-AI（Dynamically Reconfigurable Processor for AI）作為具有高速AI推理處理能力的AI加速器，基于瑞薩多年來開發(fā)的可重構(gòu)處理器技術(shù)，實(shí)現(xiàn)了端點(diǎn)所需的低功耗和靈活性。RZV2H采用的DRP-AI3加速器是 最新的DRP-AI產(chǎn)品，其能效比上一代產(chǎn)品高出約10倍。DRP-AI3能夠應(yīng)對AI的進(jìn)一步發(fā)展和機(jī)器人等應(yīng)用的復(fù)雜要求。解決發(fā)熱挑戰(zhàn)，實(shí)現(xiàn)高實(shí)時(shí)處理速度，并實(shí)現(xiàn)AI產(chǎn)品的更高性能和更低功耗。

具備可對AI模型進(jìn)行修剪的硬件（H/W）-軟件（S/W）協(xié)調(diào)與傳統(tǒng)模型相比，實(shí)現(xiàn)了約10倍的能效提升。

■ AI加速器（DRP-AI3硬件）引入高速低功耗技術(shù)進(jìn)行修剪模型

■ 輕松生成適合DRP-AI3的修剪模型的軟件，并在硬件中實(shí)現(xiàn)最佳

DRP-AI、DRP和CPU在異構(gòu)架構(gòu)中協(xié)同工作，以加速包含AI的各種算法。

主要應(yīng)用

■ 機(jī)器人

■ 工業(yè)視覺

■ 智慧零售

■ 智慧城市及基礎(chǔ)建設(shè)

■ 智慧家居等

RZ/V2H開發(fā)生態(tài)系統(tǒng)

1

評估板套件（EVK）

RZ/V2H AI MPU評測套件（RTK0EF0168C04000BJ）用于評測瑞薩電子RZ/V2H四核視覺AI MPU該套件。包括CPU板和擴(kuò)展（EXP）板。支持RZ/V2H標(biāo)準(zhǔn)軟件包，能輕松實(shí)現(xiàn)低功耗AI推理和視頻流等軟件開發(fā)任務(wù)。此外，這款評測套件還支持圖像信號處理器（ISP）、3D圖形引擎（GE3D）和可信安全I(xiàn)P等可選功能。

主板（Dimension: 153mm*100mm）

擴(kuò)展版（Dimension: 153mm*100mm）

2

RZ/V2H AI軟件開發(fā)套件（AI SDK）

RZ/V2H AI軟件開發(fā)套件為RZ/V2H開發(fā)板提供AI應(yīng)用開發(fā)環(huán)境，包括AI SDK軟件包及AI SDK源代碼，用戶可以快速、容易地建立和運(yùn)行AI應(yīng)用。

下圖展示通過3步將用戶所需AI應(yīng)用在V2H硬件上部署和運(yùn)行。

3

RZ/V2H AI 模型轉(zhuǎn)換工具

■ DRP-AI Translator（DRP-AI轉(zhuǎn)換器）：這工具用于將ONNX（開放神經(jīng)網(wǎng)絡(luò)交換）格式的訓(xùn)練AI模型轉(zhuǎn)換為可由DRP-AI執(zhí)行的對象格式。

■ DRP-AI TVM：此工具是DRP-AI轉(zhuǎn)換器到TVM后端的擴(kuò)展。CPU和DRP-AI可以協(xié)同工作，對AI模型進(jìn)行推理處理。

RZ/V MPU系列

RZ/V MPU系列提供一個(gè)可擴(kuò)展的AI性能陣容從0.5TOPS 算力到8TOPS（Dense模型）/80TOPS（Sparse模型），一個(gè)MPU平臺(tái)即可滿足入門級到高性能的不同需求。下圖展示RZ/V系列的產(chǎn)品規(guī)格比較及AI推理性能比較。

RZ/V系列以ResNet-50為例AI推理性能比較（不包括前/后處理）

審核編輯：劉清