日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2610.26545

履歴証拠を再活用する学習不要の視覚言語ナビゲーション

ReInsVLN: Revisiting Historical Evidence for Training-Free Vision-and-Language Navigation

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語ナビゲーションにおいて履歴の冗長性を圧縮しつつ、忘却に着想を得た再指示で保持情報を再活用する学習不要フレームワークを提案し、成功率と計算効率を改善した。

詳しい要約

1. どんなもの?

- VLN (Vision-and-Language Navigation) における履歴の保持・活用を改善する研究。 - 履歴の冗長性と、保持情報が十分使われない問題に着目。 - ReInsBench という履歴活用を診断するベンチマークを導入。 - 履歴レビューの再指示 (history-review reinstruction) で既存タスク文脈を用いた失敗回復が可能と示す。 - これを動機に、frozen navigator 向けの training-free フレームワーク ReInsVLN を提案。

2. 先行研究と比べてどこがすごい?

- 従来 VLN は履歴の保持・利用に依存するが、履歴増大による冗長性と保持情報の未活用が課題。 - ReInsBench により履歴活用を制御された継続試行で診断する点が新しい。 - 履歴レビュー再指示が既存文脈で失敗回復できることを示した点が特徴。 - ReInsVLN は training-free で frozen navigator に適用可能。 - R2R Val-Unseen で native StreamVLN 比 +8.48pt、InternVLA-N1 比 +3.37pt の成功率改善。

3. 技術・手法の肝は?

- ReInsVLN は training-free で memory construction と utilization を支援。 - Coverage- and Instruction-Aware Compression: 時間的冗長性削減、coverage-aware protection、instruction-guided token selection で compact な視覚文脈を構築。 - Forgetting-Inspired History Reminders: 事前定義スケジュールに従い保持観測の再訪を誘導。 - 追加の model calls を必要としない。 - frozen navigator を変更せずに履歴活用を促す設計。

4. どうやって有効だと検証した?

- ReInsBench の controlled continuation trials で履歴活用を診断。 - R2R Val-Unseen で評価。 - StreamVLN を 8.48pt 改善し 64.27%、InternVLA-N1 を 3.37pt 改善し 64.44%。 - 視覚圧縮は matched observation workloads で prefill latency を最大 21.77%、KV cache memory を最大 32.25% 削減しつつ性能を概ね維持。 - humanoid と quadruped ロボットの実世界試行で sequential instruction following と ordinal navigation への適用性を支持。

5. 議論はある?

- 履歴の冗長性と保持情報の未活用という VLN の課題を ReInsBench で診断。 - 履歴レビュー再指示が失敗回復に有効という知見。 - 視覚圧縮による効率化と性能維持のトレードオフを議論可能。 - 実ロボット試行は限定的な適用性支持であり、詳細な議論は要旨からは不明。 - 事前定義スケジュールの一般性や他 navigator への拡張性は要旨からは不明。

6. 次に読むべき論文は?

- StreamVLN - InternVLA-N1 - ReInsBench に関連する VLN 履歴活用研究 - training-free な VLN 手法 - KV cache 圧縮・visual token compression 関連研究 - R2R ベンチマーク関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Siwei Cheng, Hao Wu, Zitong Qi, Xinming Zhang, Haoyu Xi, Peiran Yin, Haozhe Hu, Xudong Wang, Xiaoyu Shen, Wei Zhang

分類: cs.RO

原文アブストラクト

Vision-and-language navigation (VLN) relies on retaining and using relevant observations. Yet growing histories introduce redundancy, and retained information may remain underused. We introduce ReInsBench, a diagnostic benchmark that examines history utilization through controlled continuation trials. Its results show that history-review reinstruction can recover navigation failures using the existing task context. Motivated by this finding, we propose ReInsVLN, a training-free framework supporting memory construction and utilization in frozen navigators. Coverage- and Instruction-Aware Compression constructs compact visual context through temporal redundancy reduction, coverage-aware protection, and instruction-guided token selection. Forgetting-Inspired History Reminders guide navigators to revisit retained observations according to a predefined schedule, without additional model calls. On R2R Val-Unseen, ReInsVLN improves success rates by 8.48 and 3.37 percentage points over the native StreamVLN and InternVLA-N1, reaching 64.27% and 64.44%, respectively. Visual compression largely preserves navigation performance while reducing prefill latency and KV cache memory by up to 21.77% and 32.25%, respectively, on matched observation workloads. Real-world trials on humanoid and quadruped robots further support the applicability of ReInsVLN to sequential instruction following and ordinal navigation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI