日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2510.16457

NavQ: 先見性を持つ視覚と言語によるナビゲーションのためのQモデル学習

NavQ: Learning a Q-Model for Foresighted Vision-and-Language Navigation

シェア:XThreadsFacebookLINEはてブBluesky

大規模な未ラベル軌道データからQ学習でQモデルを訓練し、将来の情報を考慮した視覚と言語によるナビゲーションを実現する手法を提案。

詳しい要約

1. どんなもの?

- 本研究は goal-oriented Vision-and-Language Navigation (VLN) を対象とする。 - 既存手法が履歴情報のみに基づき意思決定し将来の影響を考慮しない点を問題視。 - 将来を見据える foresighted agent の実現を目指す。 - Q-learning で大規模未ラベル trajectory data から Q-model を学習し、各候補行動の Q-feature を生成する。 - これを navigation instructions と統合し A*-style searching で目的地到達可能性の高い領域を探索する。

2. 先行研究と比べてどこがすごい?

- 既存手法は historical information に基づく判断が中心で、行動の長期的帰結を無視しがち。 - 本研究は将来観測されうる情報を表す Q-feature を明示的に生成する点が異なる。 - 大規模 unlabeled trajectory data を活用し、屋内 scene の layout や object relations に関する汎用知識を学習。 - task-agnostic な Q-feature と instructions を cross-modal future encoder で統合。 - 履歴ベースのスコアと将来スコアを組み合わせ A*-style searching を行う点が新規。

3. 技術・手法の肝は?

- Q-learning により大規模 unlabeled trajectory data から Q-model を学習。 - 各 candidate action に対し Q-feature を生成し、行動後の潜在的将来情報を表現。 - cross-modal future encoder が Q-feature と navigation instructions を統合し action scores を算出。 - 将来見通しスコアを元の history-based scores と統合。 - A*-style searching strategy により目的地到達可能性の高い領域を効率的に探索。

4. どうやって有効だと検証した?

- 広く使われる goal-oriented VLN datasets 上で extensive experiments を実施。 - 提案手法の有効性を実験的に検証したと記載。 - 具体的な dataset 名や評価指標、比較手法の詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 想定される論点として、unlabeled trajectory data の質・規模への依存、Q-feature の汎化性、A*-style searching の計算コストが考えられるが、要旨に明記なし。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として Q-learning、Q-network、A* search、Vision-and-Language Navigation (VLN) の代表的先行研究を挙げる。 - goal-oriented VLN の定番 dataset を用いた比較研究も次に読む候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Peiran Xu, Xicheng Gong, Yadong MU

分類: cs.CV, cs.RO

原文アブストラクト

In this work we concentrate on the task of goal-oriented Vision-and-Language Navigation (VLN). Existing methods often make decisions based on historical information, overlooking the future implications and long-term outcomes of the actions. In contrast, we aim to develop a foresighted agent. Specifically, we draw upon Q-learning to train a Q-model using large-scale unlabeled trajectory data, in order to learn the general knowledge regarding the layout and object relations within indoor scenes. This model can generate a Q-feature, analogous to the Q-value in traditional Q-network, for each candidate action, which describes the potential future information that may be observed after taking the specific action. Subsequently, a cross-modal future encoder integrates the task-agnostic Q-feature with navigation instructions to produce a set of action scores reflecting future prospects. These scores, when combined with the original scores based on history, facilitate an A*-style searching strategy to effectively explore the regions that are more likely to lead to the destination. Extensive experiments conducted on widely used goal-oriented VLN datasets validate the effectiveness of the proposed method.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI