日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

知覚/自動運転arXiv:2508.17969

自動運転車の内外監視を統合した知覚システム:AutoTRUSTパラダイム

A holistic perception system of internal and external monitoring for ground autonomous vehicles: AutoTRUST paradigm

シェア:XThreadsFacebookLINEはてブBluesky

自動運転車の車内(乗員行動・空気質・快適性)と車外(LiDAR点群のセマンティックセグメンテーション)を統合的に知覚するAIフレームワークを提案し、実車両で検証した。

詳しい要約

1. どんなもの?

- 本論文は、地上の自動運転車両(Autonomous Vehicles)向けに、車内(internal)と車外(external)の監視を統合したholistic perception systemを提案する。 - 車内監視はmulti-camera setupによる顔認識(facial recognition)で運転者・乗員の行動を予測・識別し、さらにlarge language modelをvirtual assistantとして活用する。 - 車内には空気質(air-quality)測定やthermal comfort分析を行うAI-empowered smart sensorsも含み、乗降(on/off-boarding)の効率化を狙う。 - 車外監視はLiDAR-basedのcost-efficient semantic segmentationにより、低品質な生3D point cloudsに対して高精度・高効率なsuper-resolutionを行う。 - EUのHorizon EuropeプログラムAutoTRUSTの文脈で開発され、ALKE提供の実electric…

2. 先行研究と比べてどこがすごい?

- 車内監視と車外監視を単一のholistic perception frameworkとして統合している点が特徴。 - 車内側ではmulti-cameraによるfacial recognitionに加え、large language modelをvirtual assistantとして組み込む構成を採る。 - 車内の空気質・thermal comfortをAI-empowered smart sensorsで扱い、乗降効率まで対象に含める点が広い。 - 車外側ではLiDAR-based semantic segmentationをcost-efficientに実現し、低品質3D point cloudsへのsuper-resolutionを組み合わせる。 - 具体的な先行研究との性能比較は要旨からは不明。

3. 技術・手法の肝は?

- 車内: multi-camera setupによるfacial recognitionで運転者・乗員の行動を予測・識別。 - 車内: large language modelをvirtual assistantとして利用。 - 車内: AI-empowered smart sensorsでair-quality測定とthermal comfort分析を行い、on/off-boardingを効率化。 - 車外: LiDAR-basedかつcost-efficientなsemantic segmentationを採用。 - 車外: 低品質な生3D point cloudsに対し高精度・高効率なsuper-resolutionを適用。 - 全体: モジュール式のperception architectureとして構成し、実車に統合・deploy。

4. どうやって有効だと検証した?

- イタリア・IspraのJoint Research Centreのintegration siteにてExperimental validationとevaluationを実施。 - ALKE提供の実electric vehicle上に統合・deployした状態で評価。 - 結果として、提案perception architectureのmodular blocksの性能と効率が向上したと報告。 - 具体的な指標・データセット・被験者数などは要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 想定される論点として、車内・車外モジュール統合時の計算資源やreal-time性、large language model利用に伴うprivacyやlatency、LiDAR point cloudsのsuper-resolution精度とcostのトレードオフなどが考えられるが、要旨には明記されていない。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として、LiDAR point cloudのsemantic segmentation(例: PointNet系、sparse convolution系)やpoint cloud super-resolution、車内monitoring向けfacial recognition、large language modelを用いたvirtual assistant、thermal comfort分析に関する文献を次に読む候補として挙げる。 - プロジェクト文脈としてはEU Horizon EuropeのAutoTRUST関連資料が参考になる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Alexandros Gkillas, Christos Anagnostopoulos, Nikos Piperigkos, Dimitris Tsiktsiris, Theofilos Christodoulou, Theofanis Siamatras, Dimitrios Triantafyllou, Christos Basdekis, Theoktisti Marinopoulou, Panagiotis Lepentsiotis, Elefterios Blitsis, Aggeliki Zacharaki, Nearchos Stylianidis, Leonidas Katelaris, Lamberto Salvan, Aris S. Lalos, Christos Laoudias, Antonios Lalas, Konstantinos Votis

分類: cs.RO, cs.CV

原文アブストラクト

This paper introduces a holistic perception system for internal and external monitoring of autonomous vehicles, with the aim of demonstrating a novel AI-leveraged self-adaptive framework of advanced vehicle technologies and solutions that optimize perception and experience on-board. Internal monitoring system relies on a multi-camera setup designed for predicting and identifying driver and occupant behavior through facial recognition, exploiting in addition a large language model as virtual assistant. Moreover, the in-cabin monitoring system includes AI-empowered smart sensors that measure air-quality and perform thermal comfort analysis for efficient on and off-boarding. On the other hand, external monitoring system perceives the surrounding environment of vehicle, through a LiDAR-based cost-efficient semantic segmentation approach, that performs highly accurate and efficient super-resolution on low-quality raw 3D point clouds. The holistic perception framework is developed in the context of EU's Horizon Europe programm AutoTRUST, and has been integrated and deployed on a real electric vehicle provided by ALKE. Experimental validation and evaluation at the integration site of Joint Research Centre at Ispra, Italy, highlights increased performance and efficiency of the modular blocks of the proposed perception architecture.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI