비전 기반 에지 AI 시스템에는 종종 단일 또는 다중 카메라 이미지 처리 및 기존의 컴퓨터 비전 작업 등이 포함됩니다. CPU 또는 GPU에서는 이러한 작업이 많은 전력을 소비하며 처리량이 제한되어 있습니다.

이 클래스의 에지 AI 프로세서 SoC는 비전 처리 가속기 코어에서 ISP, 렌즈 왜곡 보정, 다중 스케일링 및 양측 잡음 필터링과 같은 하드웨어에서 계산 집약적 저수준 무차별 암호 픽셀 처리 비전 작업을 가속화합니다. 깊이 및 동작 인식 가속기 코어는 스테레오 깊이 예측 및 고밀도 광학 흐름을 가속화하여 그림 3에 나와 있는 것처럼 환경에 대한 인식을 제고합니다.

하드웨어에서 이러한 작업 가속은 저전력 소비와 작은 크기를 모두 줄여줍니다. 이러한 작업은 하드웨어에서 가속화되지만, 이러한 구성 기능은 여러분의 시스템 요구 사항에 가장 잘 맞는 액셀러레이터 기능을 사용하여 유연성을 제공합니다.

이러한 통합과 가속으로 사용자 지정 ISP 또는 FPGA가 필요하지 않게 되며, 하드웨어에서 계산 집약적 이미징 및 비전 작업을 처리하는 데 CPU 메가 헤르츠의 공간을 확보할 수 있습니다. 예를 들어, 단일 비전 프로세싱 가속기 코어는 30fps로 최대 8메가픽셀 또는 2대의 8메가픽셀 카메라를 처리할 수 있습니다. 깊이 및 동작 처리 가속화 코어는 초당 80메가픽셀에서 스테레오 깊이 추정을 수행하고 초당 150메가픽셀에서 모션 벡터를 계산할 수 있습니다.