日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/VLAarXiv:2507.12911

LaViPlan:言語誘導視覚経路計画と検証可能報酬強化学習

LaViPlan : Language-Guided Visual Path Planning with RLVR

シェア:XThreadsFacebookLINEはてブBluesky

自動運転のOODシナリオに対応するため、検証可能報酬強化学習(RLVR)で視覚言語モデルを微調整し、言語推論と行動レベルの軌道計画を整合させるフレームワークを提案。

詳しい要約

1. どんなもの?

- 自動運転の OOD シナリオにおける計画の汎化失敗を対象とした研究 - Vision-Language Models (VLMs) を Language-Guided Visual Path Planning に用いる LaViPlan を提案 - Reinforcement Learning with Verifiable Rewards (RLVR) で計画指向の指標を用いて VLM を fine-tune する枠組み - 言語推論と低レベル trajectory の不整合の緩和を狙う

2. 先行研究と比べてどこがすごい?

- 既存 VLMs は高レベルな scene understanding やユーザ整合の判断は可能だが、言語推論と action-level planning の trajectory が不整合 - LaViPlan は RLVR を post-training として用い、計画指向の指標で VLM を fine-tune する点が特徴 - in-domain と out-of-domain の両データセットで planning 性能が向上 - 言語的忠実度は RLVR 後にやや低下するが、定性評価では出力の一貫性は保たれる

3. 技術・手法の肝は?

- Reinforcement Learning with Verifiable Rewards (RLVR) により VLM を fine-tune - 報酬として planning-oriented metrics を用いる - 言語ベース推論を action-level planning に整合させる post-training パラダイム - sampling ratio と reasoning guidance の設計が性能に影響 - 詳細なアルゴリズムは要旨からは不明

4. どうやって有効だと検証した?

- in-domain および out-of-domain データセットで planning 性能を評価 - RLVR fine-tuning 後の言語的忠実度の変化を確認 - 定性評価で出力の一貫性を検証 - sampling ratio と reasoning guidance に関する ablation studies を実施

5. 議論はある?

- RLVR 後に linguistic fidelity がやや低下する点を報告 - ただし定性評価では出力の coherence は維持されると述べる - sampling ratio や reasoning guidance の設計選択が性能に与える影響を議論 - RLVR が言語誘導推論と action-level planning の整合に有効な post-training パラダイムとなり得る可能性を示す

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として Vision-Language Models (VLMs)、Reinforcement Learning with Verifiable Rewards (RLVR)、autonomous driving の planning に関する研究を挙げる - 同分野の定番として out-of-distribution (OOD) generalization や trajectory planning の文献が候補

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hayeon Oh

分類: cs.RO, cs.LG

原文アブストラクト

Out-of-distribution (OOD) scenarios in autonomous driving pose critical challenges, as planners often fail to generalize beyond their training experience, leading to unsafe or unexpected behavior. Vision-Language Models (VLMs) have shown promise in handling such scenarios by providing high-level scene understanding and user-aligned decisions. However, existing VLMs often exhibit a misalignment between their language-based reasoning and the low-level trajectories required for action-level planning. In this paper, we propose LaViPlan, a framework that leverages Reinforcement Learning with Verifiable Rewards (RLVR) to fine-tune VLMs using planning-oriented metrics. Experimental results show that LaViPlan improves planning performance across both in-domain and out-of-domain datasets. While linguistic fidelity slightly decreases after RLVR-based fine-tuning, qualitative evaluation indicates that the outputs remain coherent. We also conduct ablation studies to analyze the effects of sampling ratio and reasoning guidance, highlighting how these design choices influence performance. These findings demonstrate the potential of RLVR as a post-training paradigm for aligning language-guided reasoning with action-level planning in autonomous driving.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI