メインコンテンツへスキップ
SECO
  • AI
  • Industries
  • Edge Computing

AI駆動の産業用HMIを構築する

アーキテクチャ上の考慮点と、モジュラーによる今後の道筋

AI駆動の産業用HMI

工場の現場のオペレーターは、タッチスクリーン、ダッシュボード、ディスプレイを通じて複雑な機械を操作しますが、これらは安全要件や生産目標に適応できなければなりません。同時に、工場は人手不足、意欲的な生産性目標、高まるセキュリティへの懸念にも対処しています。

AIで強化されたヒューマンマシンインターフェース(HMI)は、個々のオペレーターを認識し、ワークフローを効率化し、ヒューマンエラーを減らし、アクセスポリシーを適用できます。たとえば、顔認識によるパーソナライズされたユーザーアクセスでは、設備やドキュメントへのアクセスを許可する前に、カメラで許可されたオペレーターを識別できます。これにより、無許可の操作のリスクが減り、訓練を受けた担当者だけが重要な機械を操作することが保証されます。

このAI駆動の機能は、既存のHMIアーキテクチャに対する段階的なアップグレードであり、OEMやシステムインテグレーターに、ベーシック・ミドル・ハイエンドの産業用HMI製品ポートフォリオを開発する道筋をもたらします。

このようなポートフォリオを設計する最適なアプローチを理解するには、まず一般的な産業用HMIの基本アーキテクチャと構成要素を定義することから始まります。

標準的な産業用HMIのアーキテクチャとAIによる拡張

従来の産業用HMIは複雑なシステムであり、通常は組込みオペレーティングシステム(LinuxやWindowsなど)を実行し、シリアルポートやEthernetを介してプログラマブルロジックコントローラー(PLC)やセンサーと通信し、HMI/SCADAツールで作成したオペレーター画面を表示します。

この機能を実現するため、標準的な産業用HMIには、最低限、次の構成要素が含まれます。

  • タッチスクリーン付きのディスプレイ(多くは7"から15")
  • 組込みプロセッサー、メモリ、ストレージ
  • フィールドバスおよびEthernet接続用のインターフェース群
  • 産業環境での動作を想定し、保護等級(IP)を備えた堅牢な筐体

従来のHMIアーキテクチャにAI機能を加えるには、より多くのリソースが必要です。たとえば顔認識は、顔の特徴をエンコードするよう学習させた畳み込みニューラルネットワークに基づいています。これらのタスク向けには、FaceNetやYOLOv3Faceなどの"軽量"モデルが用意されており、OpenCVとLiteRT(TensorFlow Lite)を使って実行することで、CPUやニューラル処理装置(NPU)ハードウェア上での推論を最適化できます。

性能面では、スムーズな顔認識のユーザー体験を実現するために、低レイテンシーと最小限のメモリオーバーヘッドが求められます。モデル自体は軽量(約1 MBのRAMで動作)にできますが、複数のプロセスや生体認証テンプレートの安全な保存に対応するため、システムメモリは少なくとも1 GB必要となる場合があります。

SECO App Hubのサンプルアプリケーションによるベンチマークでは、専用NPUでの推論のレイテンシーは約36 msですが、CPUのみで実行すると440 msを超える場合があります。明らかに、ディスプレイコンピューターによってAIワークロードへの適性は異なります。つまり、ディスクリートまたは統合型のNPUやグラフィック処理装置(GPU)があれば、CPUに過負荷をかけることなくリアルタイム性能を実現しやすくなります。

もちろん、このAIアプリケーションを実現するには、従来のHMIアーキテクチャに挙げた以外の構成要素も必要です。たとえば次のものです。

  • カメラモジュール:十分な解像度とレンズの鮮鋭度に加え、低照度環境向けの赤外線(IR)機能を備えたもの。カメラはディスプレイのベゼルに取り付け、MIPI-CSIまたはUSBポートで接続します
  • エッジAIアクセラレーション:NPU、GPU、またはビジョン処理装置(VPU)を統合したプロセッサーを使い、推論ワークロードをオフロードします
  • 4 GB以上のRAMと16 GBのeMMC:オペレーティングシステム、AIモデル、アプリケーションソフトウェアを格納するため
  • ハードウェアRoot of Trust、セキュアブート、暗号化:顔テンプレートを保護し、オペレーターを認証するため

AI対応の産業用ディスプレイコンピューターの設計アプローチ

産業用HMIの製品ラインを提供するオートメーション機器サプライヤーは、たとえば、従来型のHMI、パーソナライズされたユーザーアクセス対応のHMI、さらにオペレーターアラート支援などの機能を備えた、より高度なバージョンで構成されるポートフォリオを検討できるようになりました。

こうしたポートフォリオの提供を目指すエンジニアリングチームには、いくつかの設計アプローチがあります。最も一般的な2つは、モノリシック設計とモジュラーアーキテクチャのアプローチです。

  • モノリシック設計:従来型ディスプレイ、パーソナライズされたアクセス、高度なAIの各ユースケースに合わせて、別々のHMIを最適化します。製品ファミリーの各モデルは、対象アプリケーションの性能を最適化するため、専用のプロセッサーとハードウェア構成を用います。ただし、複数の設計を並行して維持する必要があるため、開発コストとサプライチェーンの複雑さが増します。
  • モジュラーアーキテクチャ:コンピューターオンモジュール(COM)規格に基づき、キャリアボードに差し込む市販の演算モジュールのフォームファクターとピン配置を定めます。このキャリアは、対象アプリケーションに必要なすべてのインターフェース(Ethernet、USB、シリアルポート、カメラ、ディスプレイなど)を備えているため、開発者は単一のディスプレイと筐体の組み合わせから出発し、エントリーレベルのCPUモジュール(基本的なHMI)からハイエンドのAIプロセッサーモジュール(AI HMI)まで、幅広いCOMの中から選んでスケールさせることができます。

SECOのModular Vision HMI製品ファミリーのアーキテクチャは、組込みコンピューティングのコア回路とI/Oベースボードを分離することで、HMI全体を再設計することなくプロセッサーをアップグレードできます。低価格モデルからAI製品へのアップグレードパスが得られるだけではありません。Smart Mobility ARChitecture(SMARC)のようなコンピューターオンモジュール規格を使えば、同じキャリアにArmまたはx86の演算モジュールを搭載できるため、市場投入までの時間がさらに短縮され、プロセッサー選定のリスクも軽減されます。

Modular Vision:AI対応HMIへの柔軟なアプローチ

SECOは、SMARCに基づくModular Visionのコンセプトにより、HMIのディスプレイサイズ、ディスプレイコンピューターのプロセッサー、AI/非AIアプリケーションの要件を整合させています。下の表では、3種類のモジュラーHMIモデルを、ディスプレイサイズ、AIの精度とレイテンシー、環境耐性、コストといった主要な指標で比較しています。

Modular Vision SKUディスプレイサイズ(インチ)プロセッサーAI性能(パーソナライズドアクセス)環境耐性コスト
Modular Vision 7 MX 937NXP i.MX93(デュアルA55、U‑65 NPU搭載)精度は中程度。Ethos U‑65により約150-200 ms。基本的な顔認証に適しており、毎秒の処理人数は限定的です。前面IP65、0 °C~60 °C、バックライト寿命50 k時間、ガラス厚3 mm低 -- エントリーレベルの価格
Modular Vision 10.1 MX 8M-Plus10.1NXP i.MX 8M Plus(クアッドA53、2.3 TOPSのNPU搭載)高精度。NPUによりリアルタイムのレイテンシー(約36 ms)を実現し、複数の顔や音声コマンドに対応します。前面IP65、0 °C~60 °C、バックライト寿命50 k時間、ガラス厚3 mm中 -- コストと性能のバランス
Modular Vision 15.6 ASL15.6Intel Atom x7000RE(2/4/8コア、UHD Graphics搭載)非常に高精度。VNNI命令を備えたCPUと統合グラフィックスを使用し、複数の顔の認識にも拡張できます。レイテンシーはコア数により異なります(12-25 ms/20-40 ms/35-70 ms)。前面IP65、0 °C~60 °C、バックライト寿命50 k時間、ガラス厚3 mm高 -- プレミアムな性能と機能

上記のModular Vision製品はいずれも、同じベースボードとディスプレイのオプションを使い、アプリケーションの性能要件に応じて演算モジュールを入れ替えます。OEMは、シンプルなHMI向けにエントリーレベルの7"モデルから始め、高度なAI機能を追加する際に、10.1"または15.6"のバリエーションへアップグレードできます。

Modular Visionによる設計

SMARCベースのModular Visionアーキテクチャを採用すれば、装置メーカーは、機構設計、コネクター、ソフトウェア環境を共通化した、拡張性の高いHMIファミリーを利用できます。また、新しいプロセッサーやメモリ構成が登場した際にも、環境や安全性への適合のために筐体全体を再認証することなくアップグレードできます。Clea OSのような最新のLinuxディストリビューションと組み合わせれば、システムにはリモートデバイス管理、セキュアなアップデート、産業用IoTプロトコルとの統合が備わります。アプリケーション開発者は、顔認識アプリ(SECO App Hubで公開)のような構築済みのAIアプリを、TensorFlow Lite、OpenCV、PyTorchを使って展開できます。性能パラメーターにわずかな調整を加えるだけで、アルゴリズムがArmとx86の両方のSMARCモジュールで動作するという安心感があります。

上で紹介したモデルは、画面サイズ、演算能力、コストを整合させることで、さまざまなAI対応のユースケースや製品ラインに対応できることを示しています。堅牢な筐体、産業グレードのディスプレイ、標準化されたインターフェースは、SECOから既製品としても、カスタム品としても入手できるため、これらのシステムを量産・展開して、生産ラインのエッジにAIをもたらすことができます。

HMIの産業用アプリケーションをお考えですか?SECOにお問い合わせいただければ、Modular Vision、Clea OS、AIアルゴリズムで、最新の製品要件にどう応えられるかをご相談いただけます。

Modular Vision 15.6 ASL

この記事で紹介した製品

Modular Vision 15.6 ASL

Intel Atom(旧Amston Lake)搭載ハイエンド15.6インチHMI

  • HMI
  • Intel® Atom™

SECO ニュースレターを受け取る。

seco.com でメールアドレスを登録してください。

登録する