跳转到主要内容

增强能效、高性能AI,适合下一代 AI 摄像头和移动机器人

图像
Hiroshi Miwa
Hiroshi Miwa
Senior Principal Engineer, Product Marketing
Published: March 19, 2025

边缘 AI 越来越多地应用于诸如工业摄像头和公共设施摄像头等嵌入式设备中,并要求嵌入式产品小型化且具有低功耗。 瑞萨电子 RZ/V 系列微处理器 (MPU) 内置 AI 加速器,即动态可重构处理器 (DRP)。该处理器以高能效而闻名,可满足人工智能市场的需求。 这种 DRP 技术不断演进到 DRP-AI3,可提供比以往更高的 AI 推理性能。

利用高性能 MPU 延长电池续航并打造紧凑型产品

新款 RZ/V2N MPU 与高端 RZ/V2H MPU(高达 80TOPS)类似,配备高能效 AI 加速器 DRP-AI3,通过剪枝技术可实现 10TOPS/W 的AI 性能,提高 AI 计算效率。

下图 1 比较了传统 RZ/V 系列与 RZ/V2N 的人工智能推理性能。以具有代表性的分类 CNN Resnet50 为例,RZ/V2N 在不进行剪枝处理(密集模型)的情况下,性能是 RZ/V2M 的 7 倍,在进行剪枝处理(剪枝率为 90%)的情况下,性能是 RZ/V2M 的 23 倍。 这种极高能效的性能可延长电池寿命,而且无需冷却风扇,因此可实现设备小型化。

图像
Comparison of AI Inference Performance of RZ/V Series Charts
图 1:比较 RZ/V 系列人工智能推理性能

双摄像头输入可提高基于 AI 的图像识别精度

RZ/V2N 通过双通道 MIPI-CSI 接口支持连接两台摄像头(图 2)。 与传统的单摄像头 AI 图像识别相比,这不但可以改善空间识别性能,还能实现高精度应用,如流动分析和跌落检测。 例如,利用双光束双角度成像技术,可通过单个芯片监控停放的汽车数量并识别车牌。 在驾驶员监控系统 (DMS) 中,RZ/V2N 可使用前向摄像头和车内摄像头对车辆内部和外部进行监控和记录。 此外,还可通过配置两台摄像头的立体摄像机来估算到被成像物体的距离,从而提高 AI 摄像头和移动机器人基于人工智能的图像识别精度。

图像
Dual-Camera Connection through Dual-Channel MIPI-CSI Interface Image
图 2:通过双通道 MIPI-CSI 接口连接双摄像头

与 RZ/V2H 架构高度兼容,可重用设计资源

RZ/V2N 与 RZ/V2H 类似,配备四核 Arm® Cortex®-A55、单核 Arm Cortex-M33 和 ISP(图像信号处理器),可重用 RZ/V2H 的软件开发资源。 此外,由于外设功能的高度兼容性,用户可根据其 AI 性能、系统配置和实时控制的必要性,从多种 RZ/V 系列 MPU 中选择最合适产品。

为了让不具备深厚 AI 专业知识的用户也能快速评测和开发 AI 应用,瑞萨电子发布了 RZ/V2N AI 软件开发套件。该套件包括瑞萨电子评估板套件和软件开发环境,以及用于不同使用案例的 50 多种不同的 AI 应用。 利用这一开发环境可缩短产品上市时间。 此外, 具备AI 知识的用户可选择 AI 编译器 来开发自己的 AI 模型,并将其集成到 RZ/V2N MPU 中(图 3)。

图像
Two Entrances to the AI Development Environment Diagram
图 3:两个人工智能开发环境入口

此外,瑞萨电子生态系统合作伙伴还将陆续提供采用 RZ/V2N 的 SOM(系统级模块)板、SBC(单板计算机)和摄像头模块等产品。 这样,用户就能从硬件设计中解脱出来,专注于 AI 应用开发,从而实现快速的产品开发。

这款独特的嵌入式人工智能处理器 RZ/V2N 是您下一次进行边缘 AI 开发的理想之选。 该器件及其评测板 (RZ/V2N-EVK) 均可从瑞萨在线商店购买。 访问 www.renesas.com/rzv2n,获取更多详细信息。

* 该产品部分采用了新能源和工业技术开发组织(NEDO) 委托项目的成果。