日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.10454

GC-VLN: グラフ制約としての指示による学習不要の視覚言語ナビゲーション

GC-VLN: Instruction as Graph Constraints for Training-free Vision-and-Language Navigation

シェア:XThreadsFacebookLINEはてブBluesky

人間の指示を空間制約の有向非巡回グラフに分解し、制約ソルバで経路を解くことで、学習なしに連続環境でロボットをナビゲートするフレームワークを提案した。

詳しい要約

1. どんなもの?

- 連続環境における training-free の Vision-and-Language Navigation (VLN) フレームワーク GC-VLN を提案する論文。 - 人間の指示文を明示的な spatial constraints に分解し、graph constraint optimization としてナビゲーション案内を定式化する。 - 制約解決により spatial semantics を解釈し、未見環境への zero-shot 適応を可能にする。 - ロボットのナビゲーション経路と最終ゴールを出力する。

2. 先行研究と比べてどこがすごい?

- 既存の zero-shot VLN 手法は主に離散環境向けか、連続シミュレータ環境での unsupervised training を伴うものが中心。 - それらは実世界シナリオへの汎化・展開が難しいという課題がある。 - 本手法は training-free で連続環境に対応し、制約駆動パラダイムにより未見環境へ zero-shot 適応する点が異なる。 - 標準ベンチマークで state-of-the-art の zero-shot VLN 手法と比べ success rate とナビゲーション効率が大幅改善したと報告。

3. 技術・手法の肝は?

- 指示文に現れる全種類の spatial relationship を網羅する spatial constraint library を構築。 - 人間の指示文を waypoint nodes・object nodes・edges からなる directed acyclic graph (DAG) に分解。 - これらをクエリとして library を検索し、graph constraints を構築。 - graph constraint optimization を constraint solver で解き、waypoint の位置を決定して経路と最終ゴールを得る。 - 解なし・複数解のケースに対処するため navigation tree と backtracking mechanism を構築。

4. どうやって有効だと検証した?

- 標準ベンチマーク上で広範な実験を実施。 - state-of-the-art の zero-shot VLN 手法と比較し、success rate とナビゲーション効率の大幅な改善を示した。 - さらに実世界実験を行い、新しい環境や指示セットへの汎化を実証したと述べる。 - 具体的なベンチマーク名・指標値は要旨からは不明。

5. 議論はある?

- 解なし・複数解のケースに対して navigation tree と backtracking mechanism で対処する点に言及。 - 実世界実験により新環境・新指示セットへの汎化可能性を示唆。 - 制約ライブラリの網羅性や制約解決の失敗時の限界、計算コストなどの詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている state-of-the-art の zero-shot VLN 手法(具体的名称は要旨からは不明)。 - 離散環境向け zero-shot VLN 手法。 - 連続シミュレータ環境での unsupervised training を用いる VLN 手法。 - 関連する定番として Vision-and-Language Navigation (VLN) の zero-shot 研究や constraint solving を用いたナビゲーション研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hang Yin, Haoyu Wei, Xiuwei Xu, Wenxuan Guo, Jie Zhou, Jiwen Lu

分類: cs.RO, cs.CV

原文アブストラクト

In this paper, we propose a training-free framework for vision-and-language navigation (VLN). Existing zero-shot VLN methods are mainly designed for discrete environments or involve unsupervised training in continuous simulator environments, which makes it challenging to generalize and deploy them in real-world scenarios. To achieve a training-free framework in continuous environments, our framework formulates navigation guidance as graph constraint optimization by decomposing instructions into explicit spatial constraints. The constraint-driven paradigm decodes spatial semantics through constraint solving, enabling zero-shot adaptation to unseen environments. Specifically, we construct a spatial constraint library covering all types of spatial relationship mentioned in VLN instructions. The human instruction is decomposed into a directed acyclic graph, with waypoint nodes, object nodes and edges, which are used as queries to retrieve the library to build the graph constraints. The graph constraint optimization is solved by the constraint solver to determine the positions of waypoints, obtaining the robot's navigation path and final goal. To handle cases of no solution or multiple solutions, we construct a navigation tree and the backtracking mechanism. Extensive experiments on standard benchmarks demonstrate significant improvements in success rate and navigation efficiency compared to state-of-the-art zero-shot VLN methods. We further conduct real-world experiments to show that our framework can effectively generalize to new environments and instruction sets, paving the way for a more robust and autonomous navigation framework.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI