- AI
- Edge Computing
- Use Cases
面向汽车检测的 Edge AI 视觉
专用 AI 硬件如何变革汽车质量控制,并实现多摄像头、低延迟的边缘分析

近年来,具备 AI 能力的视觉系统从根本上改变了汽车整车检测的格局。与能够每秒评估数千张图像的先进 AI 模型相结合,现代摄像系统现在可以检测出车辆漆面细微偏差所造成的生产不精确之处。由于检测在生产过程中实时进行,这些机器视觉方面的进步推动了整个汽车制造业生产质量的显著提升。
同样,汽车保险公司也可以使用这些系统来大幅缩短理赔处理时间。在这里,AI 图像识别可以根据客户上传的图像快速检测、评估车辆损伤并进行分类,从而无需人工检查。维修车间也可以受益于智能图像分析,精确识别损伤并计算维修成本。这有助于缩短车辆停驶时间并使成本估算更加透明,从而提高客户满意度。
在边缘实时处理 AI 模型
Edge 计算平台在现代生产环境的 AI 视觉中发挥着关键作用。与云端 AI 处理不同,这些平台在数据产生的地方运行,即直接在摄像头或图像传感器处,并利用 AI 加速器,针对来自高速摄像头、每秒数百或数千张图像的视频流进行实时推理。
此类视频处理流水线综合利用通用中央处理器(CPU)、图形处理器(GPU)、图像传感器处理器(ISP)、视觉处理单元(VPU)、神经网络处理单元(NPU)或 AI 加速器硬件。各个单元根据应用所需的运算以及完成这些运算的最高效方式来选择。
通常,原始视频或图像数据首先进入本地内存,由 CPU、VPU 或 ISP 加载并进行预处理,以降低噪声或批量处理帧。预处理后的数据随后被写回本地内存,再由板载加速器加载,该加速器针对使用 AI 模型或算法运行缺陷检测、物体识别或其他分析进行了优化。推理结果被写回共享内存,由 CPU、VPU 或 ISP 进行后处理,然后输出到显示屏、控制回路或整个汽车质量检测系统的其他子系统。
图 1. SOM-COMe-BT6-RK3588 上的 Axelera Metis AIPU 可提供最高 214 TOPS 的 AI 计算性能,足以同时处理八路高清摄像头画面,并仍能执行光学字符识别和物体检测。
AI 加速器与精心设计的板载内存架构相结合,可在小型边缘设备上同时对多路视频流进行低延迟处理。SOM-COMe-BT6-RK3588 就是这样的平台之一,它是一款 COM Express Type 6 Basic 模块,凭借其 120 × 95 mm 的外形规格,非常适合紧凑型 AI 视觉系统。该解决方案基于强大的 Rockchip RK3588 CPU,具有四个 Arm Cortex-A76 和四个 Cortex-A55 应用内核,以及三个用于控制任务的 Cortex-M0 内核。在最高 32 GB LPDDR5-3200 内存的支持下,RK3588 还集成了 Arm Mali GPU、NPU 和 VPU,使其成为处理先进视频工作负载的强大系统。
然而,SOM-COMe-BT6-RK3588 的亮点是 Axelera AI Metis AIPU(AI 处理单元)。在基准测试中,这款专用硬件加速器已被证明可提供最高 214 TOPS 的 AI 性能,在同类产品中名列前茅。单独运行时,Metis AIPU 的能效约为每瓦 15 TOPS,同样十分节能,使得在一个资源优化的边缘系统上运行多流 AI 工作负载成为可能,例如多达 24 路并行摄像头视频流的实时物体检测。
作为 SECO COM Express 模块的一部分,Metis AIPU 在真实环境中为开发人员提供最高 120 TOPS 的 AI 性能。该模块板载的 Rockchip RK3588 CPU 最多支持四个摄像头,并且通过使用 MIPI CSI-2 虚拟通道(VC)等技术进行通道虚拟化和聚合,甚至有可能支持更多。现在,开发人员可以利用 Metis AIPU 的高端 AI 处理能力,为汽车检测应用构建先进的视觉系统。
利用 AI 加速进行视频处理
为简化边缘高性能 AI 视觉的开发,Axelera AI 的 Metis AIPU 由其 Voyager SDK 提供支持。这套对用户友好的软件栈可自动编译、优化并部署整个 AI 流水线,同时兼容 LiteRT(前身为 TensorFlow Lite)和 PyTorch 等流行的 AI 开发框架。
因此,开发人员可以将 Metis AIPU 的全部潜力用于各类应用场景。例如,借助 Metis,提供汽车质量检测系统的 OEM 和系统集成商可以在相同的基础构建模块之上,选择多种不同的实现方案。
其中一种实现方案是使用两个外部四路解串器和 MIPI-CSI VC,在 SOM-COMe-BT6-RK3588 双板载 CSI 连接器的四条通道上聚合最多八路摄像头视频流。
Axelera AI 维护着一个内容丰富的 GitHub 库,其中包含许多文档完善的示例项目,例如下文重点介绍的 8x 1080p60、4x 4K30 或 1x 8K30 演示。这些示例有助于开发人员在真实环境中上手。
图 2. SOM-COMe-BT6-RK3588 支持一系列可针对特定应用场景扩展的 I/O。例如在汽车制造质量检测系统中,可在 COM Express Type 6 模块的配套载板上增加两个四路解串器,并配合 MIPI 虚拟通道(MIPI VC)使用,以聚合来自最多八个摄像头的视频流。
| 场景 | 估算的吞吐量与延迟 | 相应的 Axelera 演示 |
|---|---|---|
| 8×1080p@60 FPS 视频流(物体检测 + 轻量 OCR) | 在集成的约 120 TOPS Metis AIPU 上实现实时吞吐量 每路视频流延迟 20-40 ms(解码/缩放 6–12 ms;检测器 6-15 ms;OCR 2–6 ms;后处理 2-5 ms) | Metis 专为多路并发视频流而设计;1080p YOLOv8S 可轻松纳入 120 TOPS 的算力预算。 |
| 4×4K@30 FPS 视频流,采用级联(检测器 + 分割) | 结合感兴趣区域(ROI)级联实现实时 延迟 35-70 ms,取决于 ROI 数量。 | 使用 fruit 演示中的级联模式,裁剪高分辨率 ROI 用于分割。 |
| 单路 8K@30 FPS 表面检测 | 使用分块实现近实时 | 8K 分块演示每秒处理数百个重叠分块;增加 AIPU 数量可提高分块吞吐量。 |
| 多个短距离 MIPI/USB 摄像头(例如 12×720p) | 吞吐量受限于 I/O 和主机预处理;AIPU 仍有余量 | Metis 可运行超过 16 路并发视频流;RK3588 的多个 CSI/USB 控制器负责处理输入。 |
如表 1 所示,Metis AI 加速器可以处理一到八路高清(HD)视频画面,同时以实时或接近实时的速度运行 AI 推理。它还可以支持 12 个或更多标清摄像头,同时仍保留应对额外工作负载的余量。
Edge AI 检测系统的前景光明的路线图
通过在其 SOM-COMe-BT6-RK3588 模块中集成专用 AI 硬件加速器,SECO 向开发人员表明,COM Express 标准已准备好提供先进的机器视觉性能,以支持下一代基于边缘的 AI。随着 AI 技术进一步简化汽车整车检测任务,这一转变将带来具有更高吞吐量和更高处理效率的新系统外形,这将至关重要。
如需了解有关搭载 Axelera AI 技术或与之兼容的 SECO Edge 计算平台的更多信息,请访问 seco.com 或 SECO App Hub。
订阅 SECO 新闻通讯。
在 seco.com 上用您的电子邮件地址订阅。




