Ir al contenido principal
SECO
  • AI
  • Edge Computing
  • Use Cases

Visión con Edge AI para la inspección en automoción

Cómo el hardware de IA dedicado transforma el control de calidad en automoción y permite analíticas edge multicámara y de baja latencia

Las ventajas del acelerador de IA Metis AIPU

En los últimos años, los sistemas de visión con IA han transformado de raíz el panorama de la inspección de vehículos en automoción. Combinados con modelos de IA avanzados capaces de evaluar miles de imágenes por segundo, los sistemas de cámaras modernos pueden ya detectar imprecisiones de producción hasta en las más mínimas desviaciones de la pintura de un vehículo. Al realizarse la inspección en tiempo real durante la producción, estos avances en visión artificial han impulsado una mejora notable de la calidad de producción en toda la fabricación de automóviles.

Del mismo modo, las aseguradoras de automóviles pueden utilizar estos sistemas para reducir drásticamente los tiempos de tramitación de siniestros. En este caso, el reconocimiento de imágenes con IA puede detectar, evaluar y clasificar con rapidez los daños del vehículo a partir de las imágenes que sube el cliente, sin necesidad de una revisión manual. Los talleres de reparación también pueden beneficiarse del análisis inteligente de imágenes para identificar con precisión los daños y calcular los costes de reparación. Esto favorece una menor inmovilización del vehículo y presupuestos más transparentes, con una mayor satisfacción del cliente.

Procesamiento de modelos de IA en tiempo real en el edge

Las plataformas de edge computing desempeñan un papel crítico en la visión con IA de los entornos de producción modernos. A diferencia del procesamiento de IA en la nube, estas plataformas operan donde se generan los datos, directamente en la cámara o el sensor de imagen, y aprovechan aceleradores de IA para la inferencia en tiempo real sobre vídeo en streaming de cientos o miles de imágenes por segundo procedentes de cámaras de alta velocidad.

Estos pipelines de procesamiento de vídeo aprovechan una combinación de unidad central de procesamiento (CPU) de propósito general, unidad de procesamiento gráfico (GPU), procesador de señal de imagen (ISP), unidad de procesamiento de visión (VPU), unidad de procesamiento neuronal (NPU) o hardware acelerador de IA. Las distintas unidades se seleccionan según las operaciones que requiere la aplicación y la forma más eficiente de llevarlas a cabo.

Normalmente, los datos de vídeo o imagen en bruto llegan primero a la memoria local, donde los carga una CPU, una VPU o un ISP que los preprocesa para reducir el ruido o agrupar fotogramas. Estos datos preprocesados se escriben de nuevo en la memoria local antes de que los cargue un acelerador integrado optimizado para ejecutar la detección de defectos, el reconocimiento de objetos u otros análisis mediante un modelo o algoritmo de IA. Los resultados de esa inferencia se escriben de nuevo en la memoria compartida, donde una CPU, una VPU o un ISP los posprocesa antes de enviarlos a una pantalla, a un bucle de control o a otro subsistema del sistema más amplio de inspección de calidad en automoción.

Figura 1

Figura 1. La AIPU Axelera Metis integrada en el SOM-COMe-BT6-RK3588 ofrece hasta 214 TOPS de rendimiento de cálculo de IA, suficiente para procesar ocho señales de cámara HD a la vez y realizar además reconocimiento óptico de caracteres y detección de objetos.

La combinación de un acelerador de IA y una arquitectura de memoria integrada cuidadosamente diseñada permite el procesamiento de baja latencia de varios flujos de vídeo simultáneos en un dispositivo edge de formato reducido. Una de estas plataformas es el SOM-COMe-BT6-RK3588, un módulo COM Express Type 6 Basic muy adecuado para sistemas compactos de visión con IA gracias a su factor de forma de 120 × 95 mm. Esta solución se basa en la potente CPU Rockchip RK3588, que cuenta con cuatro núcleos de aplicación Arm Cortex-A76 y cuatro Cortex-A55, junto con tres núcleos Cortex-M0 para tareas de control. Con hasta 32 GB de memoria LPDDR5-3200, la RK3588 integra además una GPU Arm Mali, una NPU y una VPU, lo que la convierte en un sistema formidable para cargas de trabajo avanzadas de procesamiento de vídeo.

Sin embargo, lo más destacado del SOM-COMe-BT6-RK3588 es la Axelera AI Metis AIPU (unidad de procesamiento de IA). En pruebas de referencia, este acelerador de hardware especializado ha demostrado ofrecer hasta 214 TOPS de rendimiento de IA, lo que lo sitúa entre los mejores de su clase. Con aproximadamente 15 TOPS por vatio de forma aislada, la Metis AIPU es además muy eficiente energéticamente, lo que permite ejecutar incluso cargas de trabajo de IA multiflujo, por ejemplo hasta 24 flujos de cámara en paralelo con detección de objetos en tiempo real, en un solo sistema edge optimizado en recursos.

Como parte del módulo COM Express de SECO, la Metis AIPU ofrece a los desarrolladores hasta 120 TOPS de rendimiento de IA en entornos reales. La CPU Rockchip RK3588 integrada en el módulo admite hasta cuatro cámaras, y potencialmente incluso más mediante la virtualización y agregación de canales con tecnologías como los canales virtuales (VC) de MIPI CSI-2. Ahora, los desarrolladores pueden crear sistemas de visión avanzados para aplicaciones de inspección en automoción aprovechando las capacidades de procesamiento de IA de gama alta de la Metis AIPU.

Cómo aprovechar la aceleración de IA para el procesamiento de vídeo

Para simplificar el desarrollo de visión con IA de alto rendimiento en el edge, las AIPU Metis de Axelera AI cuentan con el respaldo de su Voyager SDK. Esta pila de software, fácil de usar, compila, optimiza y despliega automáticamente todo el pipeline de IA y ofrece además compatibilidad con frameworks de desarrollo de IA populares como LiteRT (antes TensorFlow Lite) y PyTorch.

Como resultado, los desarrolladores pueden aprovechar todo el potencial de la Metis AIPU en una amplia variedad de casos de uso. Con Metis, por ejemplo, los OEM e integradores de sistemas que suministran sistemas de inspección de calidad en automoción pueden elegir entre diversas opciones de implementación sobre los mismos bloques de construcción básicos.

Una de estas implementaciones consiste en usar dos deserializadores cuádruples externos y MIPI-CSI VC para agregar hasta ocho flujos de cámara en cada uno de los cuatro lanes de los conectores CSI duales integrados del SOM-COMe-BT6-RK3588 (los lanes MIPI).

Axelera AI mantiene una amplia biblioteca en GitHub con muchos proyectos de ejemplo bien documentados, como las demos de 8x 1080p60, 4x 4K30 o 1x 8K30 que se destacan a continuación. Ayudan a los desarrolladores a empezar en entornos reales.

Figura 2

Figura 2. El SOM-COMe-BT6-RK3588 admite una gama de E/S que puede ampliarse para casos de uso específicos. En un sistema de inspección de calidad de la fabricación de automóviles, por ejemplo, podrían añadirse dos deserializadores cuádruples a la placa portadora del módulo COM Express Type 6 y utilizarse con MIPI Virtual Channels (MIPI VC) para agregar los flujos de hasta ocho cámaras.

EscenarioCaudal y latencia estimadosDemo de Axelera de apoyo
Flujos de 8×1080p@60 FPS (detección de objetos + OCR ligero)Caudal en tiempo real en la Metis AIPU integrada de ~120 TOPS
Latencia de 20-40 ms por flujo (decodificación/redimensionado 6–12 ms; detector 6-15 ms; OCR 2–6 ms; posprocesamiento 2-5 ms)
Metis está diseñada para muchos flujos de vídeo simultáneos; YOLOv8S a 1080p cabe con holgura en el presupuesto de 120 TOPS.
Flujos de 4×4K@30 FPS con cascada (detector + segmentación)Tiempo real con cascadas de región de interés (ROI)
Latencia de 35-70 ms, según el número de ROI.
Use el patrón de cascada de la demo de fruta, recortando ROI de alta resolución para la segmentación.
Inspección de superficies en un único flujo de 8K@30 FPSCasi en tiempo real mediante teseladoLa demo de teselado 8K procesa cientos de teselas solapadas por segundo; escalar las AIPU aumenta el caudal de teselas.
Muchas cámaras MIPI/USB cortas (p. ej., 12×720p)Caudal limitado por la E/S y el preprocesamiento del host; la AIPU aún tiene margenMetis puede ejecutar más de 16 flujos de vídeo simultáneos; los múltiples controladores CSI/USB de la RK3588 gestionan la entrada.

Como muestra la Tabla 1, el acelerador de IA Metis puede procesar desde uno hasta ocho flujos de vídeo de alta definición (HD) mientras ejecuta inferencia de IA en tiempo real o casi real. También puede admitir 12 o más cámaras de definición estándar y conservar margen para cargas de trabajo adicionales.

Una hoja de ruta prometedora para los sistemas de inspección con Edge AI

Al integrar un acelerador de hardware de IA dedicado en su módulo SOM-COMe-BT6-RK3588, SECO ha demostrado a los desarrolladores que el estándar COM Express está listo para ofrecer un rendimiento avanzado de visión artificial que respalde la próxima generación de IA en el edge. Este cambio permitirá nuevos factores de forma de sistema con mayor rendimiento y una mayor eficiencia de procesamiento, algo esencial a medida que las tecnologías de IA agilicen aún más las tareas de inspección de vehículos en el sector de la automoción.

Para obtener más información sobre las plataformas de edge computing de SECO que incorporan la tecnología de Axelera AI o son compatibles con ella, visite seco.com o el SECO App Hub.

SOM-COMe-BT6-RK3588

Destacado en este artículo

SOM-COMe-BT6-RK3588

Módulo COM Express® type 6 basado en SoC Rockchip RK3588 acoplado a la AIPU Metis de Axelera AI.

  • COM Express®
  • Rockchip RK3588

Reciba la newsletter de SECO.

Suscríbase con su dirección de correo en seco.com.

Suscribirse