日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

視覚言語ナビゲーションarXiv:2610.38248

実行可能性を考慮した階層強化学習による連続環境での視覚言語ナビゲーション

MATCH: Execution-Aware Hierarchical Reinforcement Learning for Vision-and-Language Navigation in Continuous Environment

シェア:XThreadsFacebookLINEはてブBluesky

言語条件付きプランナと目標条件付き実行者を同時学習するMATCHを提案し、連続環境のVLNベンチマークで最高性能を達成した。

詳しい要約

1. どんなもの?

- VLN-CE(Vision-and-Language Navigation in Continuous Environments)のための階層型強化学習フレームワーク MATCH を提案する研究。 - 言語条件付き planner と goal 条件付き primitive-action executor を同時に学習する。 - 衝突制約下での指示整合的な計画と信頼できる実行の両立を狙う。 - 0.5B パラメータで R2R-CE と RxR-CE のベンチマークにおいて state-of-the-art を達成。 - 実ロボットへの予備的展開も報告している。

2. 先行研究と比べてどこがすごい?

- 多くの階層型アプローチは planner のみを最適化し、executor を固定していた。 - MATCH は planner と executor を joint に学習する点が異なる。 - execution-aware topological graph により、executor の価値推定と実現済み結果の記憶を planner の意思決定に統合する。 - executor の現在の振る舞いに planner が要求を適応させる synchronized on-policy 更新を実現。 - 具体的な先行研究名や比較数値は要旨からは不明。

3. 技術・手法の肝は?

- execution-aware topological graph が start 依存の実行オプションを表現し、executor の value estimate と realized outcome memory を統合する。 - planner は実行要求を選択し、bounded continuous offsets でターゲットを微調整する。 - transition-aware dense macro reward が reference route に沿った順序的進捗と execution residual のバランスを取る。 - 段階的 curriculum の後に、planner 生成要求で executor を学習させつつ planner が要求を適応させる同期 on-policy 更新を行う。 - 詳細なネットワーク構成や学習アルゴリズムは要旨からは不明。

4. どうやって有効だと検証した?

- R2R-CE と RxR-CE のベンチマークで評価し、0.5B パラメータで state-of-the-art 性能を達成したと報告。 - 実ロボットへの予備的展開(preliminary real-robot deployments)で実用可能性を示した。 - 具体的な指標、ベースライン、アブレーションの詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - ただし execution-aware graph や dense macro reward の設計選択、実ロボット展開の規模や限界については本文での議論が想定される。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な先行研究は明示されていない。 - 関連手法として VLN-CE の代表的ベースライン(例:Seq2Seq、VLN-BERT 系、RecBERT 系)や階層型 RL の一般的枠組みを挙げる。 - R2R-CE と RxR-CE のベンチマーク論文も参照候補。 - 具体的な次読論文は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shuhao Ye, Yufei Wei, Demao Wang, Shichao Zhai, Rong Xiong, Yue Wang

分類: cs.RO

原文アブストラクト

Vision-and-Language Navigation in Continuous Environments (VLN-CE) requires instruction-consistent planning and reliable execution under collision constraints. Yet many hierarchical approaches optimize the planner while keeping execution fixed. We introduce MATCH, a framework that jointly learns a language-conditioned planner and a goal-conditioned primitive-action executor. An execution-aware topological graph represents start-dependent execution options and integrates executor value estimates with realized outcome memory, enabling the planner to select execution requests and refine their targets through bounded continuous offsets. A transition-aware dense macro reward balances ordered progress along the reference route against execution residual, encouraging executable requests without substituting local success for instruction following. A staged curriculum culminates in synchronized on-policy updates, with the executor learning on planner-generated requests and the planner adapting its requests to the executor's current behavior. With 0.5B parameters, MATCH achieves state-of-the-art performance on the R2R-CE and RxR-CE benchmarks. Preliminary real-robot deployments further demonstrate its practical potential.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI