产品简介 | RZ/V2系列MPU

RZ/V2系列MPU简介

RZ/V2系列是一种内置瑞萨电子独家硬件加速器 “DRP(Dynamically Reconfigurable Processor,动态可配置处理器)-AI”的AI专用微处理器(MPU)。DRP-AI专为嵌入式机器视觉类AI/ML(Machine Learning)应用优化设计,可提供实时AI推理和图像处理功能,同时兼具了高AI推理性能和低功耗特性,家族化产品支持0.4~80TOPS不等的可扩展AI算力,为资源(如电池容量、空间等)有限的嵌入式端侧AI应用提供差异化有竞争力的解决方案。


家族产品概览


按照性能划分

RZ/V系列有三大子系列产品:


1  入门级RZ/V2L,配备软ISP和3D图形引擎,可应用于基础的分类、目标检测、人脸识别等应用,主要规格如下:

  • 2 x Cortex-A55,最高主频1.2GHz,支持NEON™/FPU

  • 专用DRP-AI硬件加速单元,软ISP(DRP库)

  • 500-MHz Arm® Mali™-G31 3D图形引擎,GPU支持库:OpenGL ES1.1/2.0/3.0/3.1/3.2,OpenCL 2.0

  • 支持MIPI-DSI或RGB888显示输出,最高支持1920 × 1080显示分辨率

  • 硬件VCP,支持H.264/ AVC编码和解码,支持高达FHD (1920 x 1080) x 30fps处理

  • 支持MIPI-CSI或DVP camera输入

  • 千兆以太网、USB2.0、双CAN-FD接口,ADC,最多7路UART


640 (1).png           640.jpg


2  中端RZ/V2M子系列包括RZ/V2M和RZ/V2MA两款产品,可用性能需求更高的目标检测、姿态估计、OpenCV加速应用,主要规格如下:

  • 2 x Cortex-A53,最高主频1.0GHz,支持NEON™/FPU

  • 专用DRP-AI硬件加速单元,加速卷积神经网络处理,或OpenCV加速

  • MIPI-CSI输入,4K/30fps高性能ISP(仅RZ/V2M)

  • MIPI-DSI,HDMI显示输出,最高支持1920 × 1080显示分辨率(仅RZ/V2M)

  • 硬件VCP,支持H.265/HEVC编码和解码,H.264/ AVC编码和解码,最高3840 × 2160p × 30fps编码, 3840 × 2160p x 30 fps解码(仅RZ/V2M)

  • 千兆以太网、USB3.1、PCIe高速接口

640 (2).png         640 (3).png

3  高性能RZ/V2H子系列(将于2023年MP),提供8~80TOPS强劲算力,可应用于支持更复杂的语义分割(避障或定位)、空间物体捕捉、行为预测等应用,主要规格如下:

  • 4 x Cortex-A55,最高主频1.8GHz,支持NEON™/FPU

  • 专用DRP-AI硬件加速单元,4K/30fps高性能ISP 

  • 500-MHz Arm® Mali™-G31 3D图形引擎,GPU支持库:OpenGL ES1.1/2.0/3.2,OpenCL 2.0

  • MIPI-CSI Camera输入,最多8路

  • MIPI-DSI显示输出,最高支持FHD(1920 × 1080p)x 60fps显示分辨率

  • 硬件VCP,支持H.265,H.264编码和解码,最高4K x 30fps 编解码

  • 千兆以太网、USB3.2、PCIe、CAN-FD等接口

640 (4).png        640 (5).png


DRP-AI作用和优势

DRP-AI对DL(Deep Learning)卷积神经网络具有非凡的加速效果,同时兼具了高AI推理性能和低功耗特性,主要原因在于:

1  DRP独特架构:集成专用AI-MAC单元和DRP两部分专用IP。端到端AI推断由DRP-AI单元单独处理,无需任何CPU介入处理

2  大部分前/后处理由DRP的流水线处理完成

3  最高的MAC操作利用率

4  通过集成Buffer内存尽可能地减少了与外部DRAM数据交换


DRP-AI的开发流程

同市场上其他主流机器学习硬件加速器,DRP-AI的开发流程包括AI包括学习(训练)和推理两个环节。差异点在于,瑞萨将提供免费的DRP-AI模型转换工具,将目标代码转换成可识别的代码,部署到RZ/V嵌入式平台。


相关资料

RZ/V2资料

https://www.renesas.cn/cn/zh/products/microcontrollers-microprocessors/rz-mpus/rzv-embedded-ai-mpus

RZ/V2 wiki知识库

https://renesas.info/wiki/RZ-V

RZ/V2 Rulz中文论坛

https://community-ja.renesas.com/zh/forums-groups/mcu-mpu/rz-mpu/f/rz-v-forum


RA MCU 生态工作室于 2021 年 8 月正式成立,位于深圳市南山区西丽 TCL 科学园 E2-5C。工作室专注于打造有料、有趣的 RA MCU 社区。

版权所有 本站内容未经书面许可,禁止一切形式的转载,增值电信业务经营许可证: 粤ICP备12092365号

极客印象