?

RZ/V2H嵌入式AI微處理器，采用瑞薩最新的DRP-AI3技術，可提供高達8TOPS（Dense模型）/80TOPS（sparse模型）的AI推理能力，以及10 TOPS/W的高能效。它既滿足處理復雜的實時物體識別及推理，同時功耗可與傳統的嵌入式MPU相媲美，無需冷卻風扇。這里介紹基于RZ/V2H的解決方案：高性能視覺AI系統。

RZ/V2H產品優勢

■ 瑞薩最新的DRP-AI3加速器，最高可達8TOPS（Dense模型）/80 TOPS（Sparse模型）推理能力

■ 高能效的DRP-AI3無需風扇，降低了冷卻組件和系統成本

■ 4路攝像頭，支持ISP處理

■ 高實時性CPU，實現AI與控制的高級協同

■ DRP加速了OpenCV等傳統圖像處理

RZ/V2H框圖

RZ/V2H主要功能

CPU: 7核

■ Cortex-A55（1.8GHz） x 4核

■ Cortex-R8（800MHz） x 2核

■ Cortex-M33（200MHz） x 1核

AI推理與圖形加速器：

■ AI加速器DRP-AI3

■ 動態可重構處理器（DRP）

圖形視頻處理：

■ MIPI CSI-2 4L攝像頭接口4路

■ Arm Mali-C55 ISP 4K

■ H.264/265編解碼

■ Mali-G31 GPU

■ MIPI DSI 4L顯示輸出

高速接口：

■ 64位LPDDR4/LPDDR4X內存接口

■ 千兆以太網2路

■ USB3.2（Gen2）接口2ch（僅限主機）

■ PCIe接口（Gen3/4通道）1通道

■ CAN接口（CAN-FD）6ch

封裝：

■ 19x19mm 1368引腳BGA 0.5mm間

?

解決方案：高性能視覺AI系統

高端視覺AI MPU采用瑞薩電子的DRP-AI高效AI加速器和OpenCV圖像處理加速器，可幫助下一代機器人實現實時目標檢測。例如，該器件可兼容使用攝像頭監控周圍環境并估計其位置的機器人吸塵器以及使用攝像頭檢查和拾取指定零件的工業機器人。

系統框圖

系統優勢

借助最大容量為80TOPS（sparse模型）的新一代人工智能加速器DRP-AI，可實現高精度和高速圖像人工智能系統片上高速Arm?Cortex-R8雙核RTOS處理器，可在單芯片上實現機器人所需的實時控制。

即使是在AI開發方面經驗不足的客戶也可以使用預先訓練的免費AI應用程序和AI SDK（一種AI開發環境）快速開發圖像AI系統。

高性能視覺AI系統

開發環境

瑞薩提供靈活豐富的AI開發環境，包括全套軟件開發套件SDK、多種AI轉換工具及豐富的與訓練庫，可以滿足從剛入門的開發者到專業的開發者對于各類AI開發的要求。

RZ/V2H AI軟件開發套件（AI SDK）

RZ/V2H AI軟件開發套件為RZ/V2H開發板提供AI應用開發環境，包括AI SDK軟件包及AI SDK源代碼，用戶可以快速、容易地建立和運行AI應用。

下圖展示通過3步將用戶所需AI應用在V2H硬件上部署和運行。

?

RZ/V2H AI模型轉換工具

■ DRP-AI Translator（DRP-AI轉換器）：這工具用于將ONNX（開放神經網絡交換）格式的訓練AI模型轉換為可由DRP-AI執行的對象格式。

■ DRP-AI TVM：此工具是DRP-AI轉換器到TVM后端的擴展。CPU和DRP-AI可以協同工作，對AI模型進行推理處理。

■ DRP-AI EXTENSION：此工具是DRP-AI擴展包，用于在AI模型訓練環境中創建稀疏模型。

下圖展示了以上3個DRP-AI工具在RZ/V2H在AI應用開發中的作用。

RZ/V的預訓練庫——免費的AI應用程序庫

基于RZ/V的AI應用，提供源代碼、預構建用二進制文件以及預訓練AI模型。用戶可以根據需要選擇不同AI應用類別。

?

如何獲取以上開發環境

豐富的AI應用一站式網站指南，易于查找和獲取以上最新版的軟件及工具。瑞薩也不斷發布易于使用的AI應用程序，減少客戶開發周期和難度。

?