日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2604.10533

VLN-NF: 偽の前提指示を用いた実現可能性を考慮した視覚言語ナビゲーション

VLN-NF: Feasibility-Aware Vision-and-Language Navigation with False-Premise Instructions

シェア:XThreadsFacebookLINEはてブBluesky

偽の前提(目標が存在しない)を含む指示でエージェントが探索し「見つからない」と明示する新しいベンチマークと手法を提案した。

詳しい要約

1. どんなもの?

- VLN-NF は、指示が feasible であることを前提としない VLN benchmark。 - 指示の target が指定 room に存在しない false-premise な状況を扱う。 - agent は navigate し、in-room exploration で evidence を集め、NOT-FOUND を明示的に出力する必要がある。 - LLM で VLN 指示を rewrite し、VLM で target absence を verify する scalable pipeline で構築。 - plausible だが事実誤認な goal を生成する。

2. 先行研究と比べてどこがすごい?

- 従来の VLN benchmark は指示が feasible で target が存在する前提。 - そのため agent は false-premise goal に対処できない。 - VLN-NF は target が指定 room に無い指示を導入し、NOT-FOUND 出力を要求。 - 評価指標 REV-SPL を提案し、room reaching・exploration coverage・decision correctness を統合評価。 - 既存手法は unreliable な指示下で under-explore し早期終了しがち。

3. 技術・手法の肝は?

- VLN-NF 構築: LLM で VLN 指示を rewrite、VLM で target absence を verify。 - 評価: REV-SPL で room reaching・exploration coverage・decision correctness を統合。 - 提案手法 ROAM: two-stage hybrid。 - 第1段: supervised room-level navigation。 - 第2段: LLM/VLM-driven in-room exploration を free-space clearance prior で guide。

4. どうやって有効だと検証した?

- 比較手法中で ROAM が best REV-SPL を達成。 - baselines は unreliable な指示下で under-explore し早期終了することが多い。 - 詳細な実験設定・データ規模は要旨からは不明。

5. 議論はある?

- false-premise 指示への対処と NOT-FOUND 出力の必要性を議論。 - 既存手法の under-exploration と premature termination を指摘。 - REV-SPL の有効性を主張。 - 限界や失敗事例の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として VLN benchmark、LLM、VLM、REV-SPL、ROAM が挙げられる。 - 同分野の定番として R2R、REVERIE、Room-to-Room などの VLN 研究が次に読む候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hung-Ting Su, Ting-Jun Wang, Jia-Fong Yeh, Min Sun, Winston H. Hsu

分類: cs.RO, cs.CL, cs.CV

原文アブストラクト

Conventional Vision-and-Language Navigation (VLN) benchmarks assume instructions are feasible and the referenced target exists, leaving agents ill-equipped to handle false-premise goals. We introduce VLN-NF, a benchmark with false-premise instructions where the target is absent from the specified room and agents must navigate, gather evidence through in-room exploration, and explicitly output NOT-FOUND. VLN-NF is constructed via a scalable pipeline that rewrites VLN instructions using an LLM and verifies target absence with a VLM, producing plausible yet factually incorrect goals. We further propose REV-SPL to jointly evaluate room reaching, exploration coverage, and decision correctness. To address this challenge, we present ROAM, a two-stage hybrid that combines supervised room-level navigation with LLM/VLM-driven in-room exploration guided by a free-space clearance prior. ROAM achieves the best REV-SPL among compared methods, while baselines often under-explore and terminate prematurely under unreliable instructions. VLN-NF project page can be found at https://vln-nf.github.io/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI