日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2512.11098

赤外線産業センシングのための視覚言語モデル:積層造形シーン記述への応用

Vision-Language Models for Infrared Industrial Sensing in Additive Manufacturing Scene Description

シェア:XThreadsFacebookLINEはてブBluesky

赤外線カメラ画像をRGB互換入力に変換し、CLIPベースの視覚言語モデルを再学習なしで適応させるゼロショット枠組みVLM-IRISを提案し、3Dプリンタ上でのワークピース存在検出を実証した。

詳しい要約

1. どんなもの?

- 赤外線カメラデータを扱えるようにVLMを適応させるzero-shotフレームワーク「VLM-IRIS (Vision-Language Models for InfraRed Industrial Sensing)」の提案 - 対象はAdditive Manufacturing(3Dプリンティング)のシーン記述・監視 - FLIR Bosonセンサで撮影した赤外画像をRGB互換入力に前処理し、CLIPベースのencoderで扱う - モデルの再学習なしにworkpiece presence detectionをzero-shotで行う

2. 先行研究と比べてどこがすごい?

- 既存のVLMはRGBデータで学習されており赤外カメラデータを理解できないという課題に対処 - 大規模ラベル付きデータを必要とするsupervised AIに対し、zero-shot学習枠組みの実用性を示す - 赤外画像をmagma表現に変換しCLIP encoderへ入力する前処理により、再学習なしで高精度を達成 - 低照度や密閉機械内など従来visionが苦手な製造環境へVLMを拡張できる可能性を示す

3. 技術・手法の肝は?

- 赤外画像をmagma representationに変換し、RGB互換入力としてCLIPベースencoderに適合させる前処理 - CLIP ViT-B/32 encoderを利用 - centroid prompt ensemblingを適用しzero-shotで予測 - モデルのretrainingは行わないlabel-freeなパイプライン

4. どうやって有効だと検証した?

- 3D printer bed上でのworkpiece presence detectionをzero-shotで実証 - build plateとworkpieceの温度差が熱画像に適することを利用 - magma表現+centroid prompt ensembling+CLIP ViT-B/32で赤外画像に対し高いaccuracyを達成 - 再学習なしでの有効性を確認(詳細なデータセット規模や定量指標は要旨からは不明)

5. 議論はある?

- 赤外線センシングへのVLM適用可能性とlabel-free monitoringへの拡張性を主張 - 対象タスクはworkpiece presence detectionに限定されており、他の産業タスクへの一般化は要旨からは不明 - 精度の具体的数値や比較ベースライン、失敗事例は要旨からは不明 - 低照度・密閉環境での実運用上の課題は要旨からは不明

6. 次に読むべき論文は?

- CLIP (Radford et al.):本手法が利用するvision-language基盤モデル - ViT-B/32:使用encoderの原論文 - prompt ensemblingに関する研究(zero-shot分類のプロンプト設計) - infrared/thermal imagingを用いたzero-shot学習や産業監視に関する関連研究(要旨に個別参照なし)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Nazanin Mahjourian, Vinh Nguyen

分類: cs.CV, cs.RO

原文アブストラクト

Many manufacturing environments operate in low-light conditions or within enclosed machines where conventional vision systems struggle. Infrared cameras provide complementary advantages in such environments. Simultaneously, supervised AI systems require large labeled datasets, which makes zero-shot learning frameworks more practical for applications including infrared cameras. Recent advances in vision-language foundation models (VLMs) offer a new path in zero-shot predictions from paired image-text representations. However, current VLMs cannot understand infrared camera data since they are trained on RGB data. This work introduces VLM-IRIS (Vision-Language Models for InfraRed Industrial Sensing), a zero-shot framework that adapts VLMs to infrared data by preprocessing infrared images captured by a FLIR Boson sensor into RGB-compatible inputs suitable for CLIP-based encoders. We demonstrate zero-shot workpiece presence detection on a 3D printer bed where temperature differences between the build plate and workpieces make the task well-suited for thermal imaging. VLM-IRIS converts the infrared images to magma representation and applies centroid prompt ensembling with a CLIP ViT-B/32 encoder to achieve high accuracy on infrared images without any model retraining. These findings demonstrate that the proposed improvements to VLMs can be effectively extended to thermal applications for label-free monitoring.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI