Aller au contenu principal
SECO
  • AI
  • Edge Computing
  • Use Cases

La vision Edge AI pour l’inspection automobile

Comment un matériel d’IA dédié transforme le contrôle qualité automobile et permet une analyse Edge multicaméra à faible latence

Les atouts de l’accélérateur d’IA Metis AIPU

Ces dernières années, les systèmes de vision dotés d’IA ont profondément transformé le paysage de l’inspection des véhicules automobiles. Associés à des modèles d’IA avancés capables d’évaluer des milliers d’images par seconde, les systèmes de caméras modernes peuvent désormais détecter des défauts de production jusqu’aux plus infimes écarts dans la peinture d’un véhicule. Avec une inspection en temps réel pendant la production, ces progrès de la vision industrielle ont considérablement amélioré la qualité de production dans l’ensemble de l’industrie automobile.

De même, ces systèmes peuvent être utilisés par les assureurs automobiles pour réduire considérablement les délais de traitement des sinistres. Ici, la reconnaissance d’images par IA peut rapidement détecter, évaluer et catégoriser les dommages d’un véhicule à partir des photos envoyées par le client, ce qui supprime le contrôle manuel. Les ateliers de réparation peuvent aussi tirer parti de l’analyse intelligente d’images pour identifier précisément les dommages et calculer les coûts de réparation. Cela raccourcit l’immobilisation des véhicules et rend les devis plus transparents, pour une meilleure satisfaction des clients.

Traiter les modèles d’IA en temps réel en périphérie

Les plateformes d’Edge computing jouent un rôle essentiel dans la vision par IA pour les environnements de production modernes. À la différence du traitement IA dans le cloud, ces plateformes fonctionnent là où les données sont générées, directement au niveau de la caméra ou du capteur d’image, et s’appuient sur des accélérateurs d’IA pour l’inférence en temps réel sur des flux vidéo de centaines ou de milliers d’images par seconde provenant de caméras haute vitesse.

Ces pipelines de traitement vidéo tirent parti d’une combinaison de matériels : unité centrale de traitement (CPU) généraliste, processeur graphique (GPU), processeur de signal d’image (ISP), unité de traitement vidéo (VPU), unité de traitement neuronal (NPU) ou accélérateur d’IA. Les différentes unités sont choisies selon les opérations requises par l’application et selon la manière la plus efficace de les réaliser.

En général, les données vidéo ou image brutes arrivent d’abord en mémoire locale, où un CPU, un VPU ou un ISP les charge pour les prétraiter, afin de réduire le bruit ou de regrouper les images. Ces données prétraitées sont ensuite réécrites en mémoire locale avant d’être chargées par un accélérateur embarqué, optimisé pour exécuter la détection de défauts, la reconnaissance d’objets ou une autre analyse à l’aide d’un modèle ou d’un algorithme d’IA. Les résultats de cette inférence sont réécrits en mémoire partagée, où un CPU, un VPU ou un ISP les post-traite avant de les envoyer vers un écran, une boucle de contrôle ou un autre sous-système du système d’inspection qualité automobile plus vaste.

Figure 1

Figure 1. L’Axelera Metis AIPU embarqué sur le SOM-COMe-BT6-RK3588 offre jusqu’à 214 TOPS de performance de calcul IA, de quoi traiter simultanément huit flux de caméras HD tout en effectuant de la reconnaissance optique de caractères et de la détection d’objets.

L’association d’un accélérateur d’IA et d’une architecture mémoire embarquée soigneusement conçue permet un traitement à faible latence de plusieurs flux vidéo simultanés sur un appareil Edge de petit format. Une de ces plateformes est le SOM-COMe-BT6-RK3588, un module COM Express Type 6 Basic bien adapté aux systèmes de vision IA compacts grâce à son format de 120 × 95 mm. Cette solution repose sur le puissant CPU Rockchip RK3588, qui comprend quatre cœurs applicatifs Arm Cortex-A76 et quatre Cortex-A55, ainsi que trois cœurs Cortex-M0 pour les tâches de contrôle. Avec jusqu’à 32 GB de mémoire LPDDR5-3200, le RK3588 intègre aussi un GPU Arm Mali, un NPU et un VPU, ce qui en fait un système redoutable pour les charges de traitement vidéo avancées.

Toutefois, le point fort du SOM-COMe-BT6-RK3588 est l’Axelera AI Metis AIPU (unité de traitement d’IA). Lors de tests de performance, cet accélérateur matériel spécialisé a atteint jusqu’à 214 TOPS de performance IA, ce qui le place parmi les meilleurs de sa catégorie. Avec environ 15 TOPS par watt en isolation, le Metis AIPU est aussi très économe en énergie, ce qui permet d’exécuter même des charges d’IA multiflux, jusqu’à 24 flux de caméras en parallèle avec détection d’objets en temps réel par exemple, sur un seul système Edge optimisé en ressources.

Au sein du module COM Express de SECO, le Metis AIPU offre aux développeurs jusqu’à 120 TOPS de performance IA en conditions réelles. Le CPU Rockchip RK3588 du module prend en charge jusqu’à quatre caméras, et potentiellement davantage grâce à la virtualisation et à l’agrégation de canaux à l’aide de technologies comme les canaux virtuels (VC) MIPI CSI-2. Les développeurs peuvent désormais construire des systèmes de vision avancés pour des applications d’inspection automobile en tirant parti des capacités de traitement IA haut de gamme du Metis AIPU.

Exploiter l’accélération IA pour le traitement vidéo

Pour simplifier le développement de la vision par IA haute performance en périphérie, les Metis AIPU d’Axelera AI sont pris en charge par son Voyager SDK. Cette pile logicielle conviviale compile, optimise et déploie automatiquement l’ensemble du pipeline d’IA, tout en offrant la compatibilité avec des frameworks de développement d’IA courants comme LiteRT (anciennement TensorFlow Lite) et PyTorch.

Ainsi, les développeurs peuvent exploiter tout le potentiel du Metis AIPU pour un large éventail de cas d’usage. Avec Metis, par exemple, les OEM et les intégrateurs de systèmes qui fournissent des systèmes d’inspection qualité automobile peuvent choisir parmi diverses options de mise en œuvre sur les mêmes briques de base.

Une de ces mises en œuvre consiste à utiliser deux désérialiseurs quad externes et les VC MIPI-CSI pour agréger jusqu’à huit flux de caméras sur chacune des quatre voies des deux connecteurs CSI embarqués du SOM-COMe-BT6-RK3588.

Axelera AI maintient une vaste bibliothèque GitHub avec de nombreux projets d’exemple bien documentés, comme les démos 8x 1080p60, 4x 4K30 ou 1x 8K30 présentées ci-dessous. Ils aident les développeurs à démarrer en conditions réelles.

Figure 2

Figure 2. Le SOM-COMe-BT6-RK3588 prend en charge une gamme d’E/S extensible selon les cas d’usage. Dans un système d’inspection qualité pour la fabrication automobile, par exemple, deux désérialiseurs quad pourraient être ajoutés à la carte porteuse associée au module COM Express Type 6 et utilisés avec les canaux virtuels MIPI (MIPI VC) pour agréger les flux de jusqu’à huit caméras.

ScénarioDébit et latence estimésDémo Axelera correspondante
Flux 8×1080p@60 FPS (détection d’objets + OCR léger)Débit en temps réel sur le Metis AIPU intégré d’environ 120 TOPS
Latence de 20-40 ms par flux (décodage/redimensionnement 6–12 ms ; détecteur 6-15 ms ; OCR 2–6 ms ; post-traitement 2-5 ms)
Metis est conçu pour de nombreux flux vidéo simultanés ; le YOLOv8S en 1080p tient largement dans le budget de 120 TOPS.
Flux 4×4K@30 FPS en cascade (détecteur + segmentation)Temps réel avec des cascades de régions d’intérêt (ROI)
Latence de 35-70 ms, selon le nombre de ROI.
Utiliser le schéma en cascade de la démo des fruits, en recadrant des ROI haute résolution pour la segmentation.
Inspection de surface 8K@30 FPS uniqueQuasi temps réel par découpage en tuilesLa démo de découpage en tuiles 8K traite des centaines de tuiles qui se chevauchent par seconde ; l’ajout d’AIPU augmente le débit de tuiles.
Nombreuses caméras MIPI/USB courtes (par ex. 12×720p)Débit limité par les E/S et le prétraitement hôte ; l’AIPU dispose encore de margeMetis peut exécuter plus de 16 flux vidéo simultanés ; les multiples contrôleurs CSI/USB du RK3588 gèrent l’entrée.

Comme le montre le Tableau 1, l’accélérateur d’IA Metis peut traiter de un à huit flux vidéo haute définition (HD) tout en exécutant l’inférence IA en temps réel ou quasi réel. Il peut aussi prendre en charge 12 caméras de définition standard ou plus, tout en conservant de la marge pour une charge supplémentaire.

Une feuille de route prometteuse pour les systèmes d’inspection Edge-AI

En intégrant un accélérateur matériel d’IA dédié à son module SOM-COMe-BT6-RK3588, SECO a montré aux développeurs que le standard COM Express est prêt à offrir des performances de vision industrielle avancées pour l’IA en périphérie de nouvelle génération. Cette évolution permettra de créer de nouveaux formats de systèmes, avec un débit plus élevé et une meilleure efficacité de traitement, ce qui sera essentiel à mesure que les technologies d’IA simplifieront encore les tâches d’inspection des véhicules automobiles.

Pour plus d’informations sur les plateformes d’edge computing de SECO intégrant la technologie Axelera AI ou compatibles avec elle, rendez-vous sur seco.com ou sur le SECO App Hub.

SOM-COMe-BT6-RK3588

Présenté dans cet article

SOM-COMe-BT6-RK3588

Module COM Express® type 6 basé sur SoC Rockchip RK3588 associé à l'AIPU Metis d'Axelera AI.

  • COM Express®
  • Rockchip RK3588

Recevez la newsletter SECO.

Inscrivez-vous avec votre adresse e-mail sur seco.com.

S’inscrire