ZHCACW1 june 2023 AM69A , TDA4VH-Q1
边缘 AI 处理器的许多现有和新兴市场应用均为多摄像头 AI 用例。多摄像头 AI 类似于 AI 盒。区别在于,在多摄像头 AI 中,多个摄像头通过 MIPI CSI-2 直接连接到系统,而来自远程摄像头的编码位流则通过 AI 盒中的以太网流式传输到系统。多摄像头 AI 的用例包括但不限于以下应用:
图 3-3 展示了 AM69A 上的多摄像头 AI 用例示例的数据流。在此示例中,使用两个 MIPI CSI-2 聚合器将八个 2MP 摄像头组合在一起,并通过两个 MIPI CSI-2 RX 端口以 30fps 的速率采集,这是与 AI 盒的主要区别。经过 ISP(图像信号处理器)、去马赛克和镜头失真校正的图像通过 MSC 缩减为较小的分辨率。通过深度学习预处理、MMA 上的深度学习网络和深度学习后处理获得的输出由硬件加速的 H.264 或 H.265 编码器进行编码,然后流式传输或保存到存储中。表 3-3 显示了多摄像头 AI 用例(带有八个 2MP 摄像头通道)的资源利用率和估算功耗。
主 IP | 利用率 (8 × 2MP (30fps)) |
---|---|
2 × CSI-2 RX | 8 × 2MP (30fps) = 7.68Gbps (26%) |
VPAC(VISS、MSC、LDC) | 8 × 2MP (30fps) = 480MP/s (40%) |
MMA | 24TOPS (75%) |
编码器 | 8 × 2MP (30fps) = 480MP/s (55%) |
8 × A72 | 深度学习预处理和后处理等 (50%) |
DDR 带宽 | 15.13GBps (22%) |
功耗 (85°C) | 20W |