基于i.MX8MP和AR0144的高效视觉解决方案

2024年10月24日 16:32    发布者:方案知识库
一、应用场景描述及市场优势
      该方案采用NXP的i.MX8MP作为主控平台,搭配onsemi的AR0144图像传感器。系统利用AR0144传感器采集环境图像数据,随后通过i.MX8MP处理器进行高效的图像分析和处理。
      这个方案采用的处理器使用了先进的14nm LPC FinFET工艺技术,支持高达4K的视频解码能力。它不仅配备有强大的四核Arm Cortex-A53处理器,运行速度高达1.8GHz,还内置了一个高达2.3 TOPS的神经处理单元(NPU)。这使得它能够处理复杂的图像识别和处理任务,如面部识别、对象追踪等。工程师可以将机器学习的推理处理任务分配给NPU,这样一来,高效的Cortex-A和Cortex-M处理器、DSP以及GPU就可以专注于处理其他系统级任务或是运行用户的应用程序。在视觉处理方面,该系统融合了双ISP技术,并且支持高动态范围(HDR)以及鱼眼镜头的图像矫正功能。ISP能够同时支持两个高清摄像头,实现实时的立体视觉效果,或是支持一个达到12M像素的单摄像头。这些先进的特性使得该系统在监控、智能零售、机器人视觉以及家庭健康监测设备等领域的实时图像处理。同时,i.MX 8M Plus还支持多种输入/输出接口,包括高速USB、PCIe、以太网和MIPI CSI,后者是连接AR0144图像传感器的理想选择。
      我们再看看传感器 - onsemi AR0144图像传感器。AR0144是一款1/4英寸1.0 Mp CMOS数字图像传感器,它采用了一种新的创新全局快门像素设计,该设计经过优化,可准确快速地捕捉运动场景。该传感器在低光和明亮的场景中都能产生清晰、低噪声的图像。它包括复杂的相机功能,如自动曝光控制、窗口、跳过行模式、跳过列模式、像素合并以及视频和单帧模式。它可以通过一个简单的双线串行接口进行编程。AR0144可生成非常清晰、锐利的数字图像,其捕获连续视频和单帧的能力使其成为扫描和工业检测等广泛应用的完美选择。
      基于i.MX 8M Plus主控和AR0144传感器的高性能特性,我们可以开发Driver Monitoring System (DMS)驾驶员监控系统,用于疲劳监测、分心监测、危险行为监测。DMS融合ADAS、舱内生活场景,催化出一些列智能化的场景体验,迅速拉升用户体验。
      这种技术平台还可以用于发展智能安全监控系统。通过高分辨率的视频捕捉和高速的图像处理,可以实现实时的面部识别和行为分析,从而提高公共安全和个人财产的保护。同样,该系统也可以被用于智能家居领域,如自动化家庭安全监控,提供侵入检测和家庭成员活动的实时分析。
      i.MX 8M Plus和AR0144的强大功能不仅可以提高现有的Driver Monitoring System (DMS)驾驶员监控系统效率和质量,还可以拓展到更广泛的智能技术应用领域,为未来的技术革新奠定坚实的基础。 场景应用图

1lux

5lux

10lux

30lux

50lux
100lux►场景应用图

►展示板照片

►方案方块图

►核心技术优势基于NXP i.MX 8M Plus处理器与onsemi AR0144图像传感器结合的技术方案具有以下核心技术优势:**高性能处理能力**:NXP i.MX 8M Plus 处理器采用四核Arm Cortex-A53架构,主频高达1.8GHz,能够快速处理复杂的计算任务。此外,内置的神经处理单元(NPU)达到2.3 TOPS,专为AI和机器学习任务设计,增强了处理器在图像识别和分析方面的性能。**高级图像处理功能**:onsemi AR0144图像传感器采用全局曝光,具备一百万像素的分辨率,对比车内抖动的环境中也能捕捉高质量图像。**多功能接口支持**:i.MX 8M Plus 支持多种视频和数据传输接口,包括MIPI CSI-2、PCIe、以太网等,提供灵活的外设连接选项和快速的数据传输能力,便于与其他系统组件或外部设备集成。**扩展性和灵活性**:系统设计允许用户根据需求添加额外的传感器和外设,支持定制化开发,满足特定应用需求,如增加更多的摄像头或集成不同的通信模块。**强大的图像和视频编解码能力**:i.MX 8M Plus 内置高效的视频处理单元,支持高达4K视频解码,适合需要高分辨率视频处理的应用,如高端安防监控、智能家居系统等。这些技术优势使得该方案在工业自动化、智能交通等多个领域具有广泛的应用潜力。►方案规格
主控(NXP i.MX 8M Plus)的规格:1.四核 Arm Cortex-A53 处理器,主频高达 1.8GHz。Cortex®-M7, 800 MHz2.集成的神经网络处理单元 (NPU),性能达到 2.3 TOPS3.集成2×ISP:—375 Mpixel/s HDR ISP supporting configurations, such as 12MP@30fps, 4kp45, or 2x 1080p80—内置 Vivante GC7000UL 3D GPU—支持最高 8GB LPDDR4 内存—支持 MIPI-DSI、MIPI-CSI、HDMI、LVDS 等多种显示和摄像头接口—支持 PCIe、Ethernet、USB、I2C、SPI、UART、GPIO 等丰富的数据通信接口—高效的 H.265/H.264/VP9 视频解码能力,支持最高 4K 分辨率—14nm FinFET 工艺,低功耗设计Sensor(onsemi AR0144)的规格:1.采用全局曝光,图像分辨率为 1M像素2.支持 1280 x 800 分辨率的静态图片拍摄3.支持最高 60fps 的全分辨率连续拍摄4.内置Automatic Black Level Calibration (ABLC)5.采用 1/4英寸光学格式,像素尺寸为 3.0um6.支持 2-lane MIPI or Parallel Data Interfac
点击此此处登录大大通,浏览更多精彩技术方案!