ZHCAF23A February   2025  – March 2025 AM62A3 , AM62A3-Q1 , AM62A7 , AM62A7-Q1 , AM67A , TDA4AEN-Q1

 

  1.   1
  2.   摘要
  3.   商标
  4. 1简介
  5. 2构建 RGB-IR 视觉流水线模块
    1. 2.1 CSI 接收器
    2. 2.2 图像信号处理器
    3. 2.3 视频处理单元
    4. 2.4 德州仪器 (TI) 深度学习加速技术
    5. 2.5 GStreamer 与 TIOVX 框架
  6. 3性能注意事项与基准测试工具
  7. 4参考设计
    1. 4.1 摄像头模块
    2. 4.2 传感器驱动程序
    3. 4.3 CSI-2 Rx 驱动程序
    4. 4.4 图像处理
    5. 4.5 适用于驾驶员与乘员监控的深度学习
    6. 4.6 参考代码与应用
  8. 5应用示例与基准测试
    1. 5.1 应用 1：利用 GST 进行单数据流采集与可视化
    2. 5.2 应用 2：利用 GST 与 TIOVX 框架进行双流采集与可视化
    3. 5.3 应用 3：GStreamerr 的代表性 OMS-DMS + 视频电话流水线
  9. 6总结
  10. 7参考资料
  11. 8修订历史记录

4.4 图像处理

OX05B1S 是一款原始传感器，其采集的原始图像可通过 ISP 处理。为了在 RGB 应用中获得最佳图像质量，必须对 ISP 调优。如需了解适用于特定传感器的 ISP 调优方法更多详细信息，可参阅《AM6xA ISP 调优指南》[4]。对于适用于 OX05B1S 的预调优 ISP 配置二进制文件，请参阅目标设备 /opt/imaging/ox05b1s/linear 路径下的 SDK。

AM62A ISP 会为每个 RGB-IR 输入帧生成两个输出帧：一个 YUV 帧与一个 IR 帧。在本参考设计中，OX05B1S 配置为以 30fps 的速率交替输出 RGB 主导流与 IR 主导流。在通过 GStreamer 或 TIOVX 实现的视觉流水线中，输出 RGB 主导流时仅使用 RGB 输出帧，丢弃 IR 帧，反之亦然，输出 IR 主导流时，仅使用 IR 帧，丢弃 RGB 输出帧。

处理 RGB 主导流时，ISP 还会生成可用于自动曝光与增益控制 (AE) 以及自动白平衡 (AWB) 的统计数据。处理器 SDK 支持 AE 与 AWB 算法（又称“2A”）。在本参考设计中，该算法可用于调整传感器曝光与增益以及白平衡增益。曝光与增益调整会发送到传感器，白平衡增益会提供给 ISP。