日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/制御arXiv:2505.04980

LVLMとMPCの連携による自動運転:安全性を考慮したタスク拡張可能な制御アーキテクチャ

LVLM-MPC Collaboration for Autonomous Driving: A Safety-Aware and Task-Scalable Control Architecture

シェア:XThreadsFacebookLINEはてブBluesky

大規模視覚言語モデル(LVLM)が生成する高レベルなタスク指令に基づき、MPC Builderがオンデマンドでモデル予測制御器を自動生成し、安全性とタスク切替の実現可能性を担保する自動運転向け統合制御フレームワークを提案した。

詳しい要約

1. どんなもの?

- 本論文は、LVLM(Large Vision-Language Model)とMPC(Model Predictive Control)を統合した自動運転(AD)向けの制御アーキテクチャを提案する。 - LVLMが高レベルなタスク計画を担い、MPC BuilderがオンデマンドにMPCを自動生成して低レベル運動計画を実行する。 - タスクスケーラビリティと安全性の両立を目指す枠組みである。

2. 先行研究と比べてどこがすごい?

- LVLMは多様な運転シナリオでの高レベル計画に優れるが、運転専用に設計されておらず、推論が低レベル運動計画の実現可能性と一致しない課題があった。 - 従来は安全性や滑らかなタスク切替に懸念が残っていた。 - 本手法はLVLMの柔軟性・適応性を保ちつつ、MPCによる実現可能性フィードバックで安全性を担保する点が新しい。

3. 技術・手法の肝は?

- LVLMが生成するシンボリックなタスクコマンドに基づき、MPC BuilderがオンデマンドでMPCを自動生成する。 - 生成されたMPCは、与えられたタスクの実現可能性をフィードバックし、LVLM駆動のタスク切替の実行または拒否を強く支援する。 - タスク切替を考慮したMPCを生成することで、最適性と安全性を確保する。

4. どうやって有効だと検証した?

- シミュレーション実験により有効性を検証した。 - 高速道路走行を安全かつ効果的に処理できることを示した。 - LVLMの柔軟性と適応性を維持できることも確認した。

5. 議論はある?

- 要旨からは不明。 - シミュレーション実験のみが示されており、実車検証や限界・失敗ケースに関する議論は要旨には記載されていない。

6. 次に読むべき論文は?

- LVLM(Large Vision-Language Model)を用いた自動運転のタスク計画に関する研究。 - MPC(Model Predictive Control)による低レベル運動計画・安全制御に関する研究。 - LVLMと制御を統合した安全志向の自動運転アーキテクチャに関する関連研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kazuki Atsuta, Kohei Honda, Hiroyuki Okuda, Tatsuya Suzuki

分類: cs.RO, cs.SY, eess.SY

原文アブストラクト

This paper proposes a novel Large Vision-Language Model (LVLM) and Model Predictive Control (MPC) integration framework that delivers both task scalability and safety for Autonomous Driving (AD). LVLMs excel at high-level task planning across diverse driving scenarios. However, since these foundation models are not specifically designed for driving and their reasoning is not consistent with the feasibility of low-level motion planning, concerns remain regarding safety and smooth task switching. This paper integrates LVLMs with MPC Builder, which automatically generates MPCs on demand, based on symbolic task commands generated by the LVLM, while ensuring optimality and safety. The generated MPCs can strongly assist the execution or rejection of LVLM-driven task switching by providing feedback on the feasibility of the given tasks and generating task-switching-aware MPCs. Our approach provides a safe, flexible, and adaptable control framework, bridging the gap between cutting-edge foundation models and reliable vehicle operation. We demonstrate the effectiveness of our approach through a simulation experiment, showing that our system can safely and effectively handle highway driving while maintaining the flexibility and adaptability of LVLMs.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI