日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2603.01477

SFCo-Nav: 低速LLMと高速属性グラフ整列の協調による効率的なゼロショット視覚言語ナビゲーション

SFCo-Nav: Efficient Zero-Shot Visual Language Navigation via Collaboration of Slow LLM and Fast Attributed Graph Alignment

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語ナビゲーション(VLN)のゼロショット手法を高速化するため、低速LLMプランナーと高速反応ナビゲーターを非同期に協調させ、必要時のみLLMを起動するフレームワークを提案した。

詳しい要約

1. どんなもの?

- 大規模 vision-language models (VLMs) と large language models (LLMs) を用いた zero-shot visual language navigation (VLN) の効率化フレームワーク SFCo-Nav を提案。 - slow-fast 認知協調の原理に着想を得て、slow LLM planner、fast reactive navigator、非同期 slow-fast bridge の3モジュールを統合。 - 自然言語指示に従い ego 知覚と推論のみでナビゲーションする zero-shot VLN を対象。 - 公開ベンチマーク R2R と REVERIE で評価し、legged robot による hotel suite 実証も行う。

2. 先行研究と比べてどこがすごい?

- 既存 zero-shot 手法は naive な observation graph を構築し、毎ステップ VLM-LLM 推論を行うため高遅延・高計算コストでリアルタイム展開が困難。 - SFCo-Nav は slow LLM planner を必要な時のみ起動する非同期トリガーを導入し、token 消費を軌跡あたり50%以上削減、3.5倍以上高速化。 - 先行 zero-shot VLN の成功率と同等以上を達成しつつ効率を大幅改善。 - 著者らの知る限り、内部 confidence に基づく非同期 LLM トリガーを備えた初の slow-fast 協調 zero-shot VLN システム。

3. 技術・手法の肝は?

- slow LLM-based planner が戦略的な subgoal の chain を生成し、各 subgoal を imagined object graph にリンク。 - fast reactive navigator がリアルタイムに object graph を構築し subgoal を実行。 - lightweight な非同期 slow-fast bridge が、構造化・属性付きの imagined graph と perceived graph を align し、navigation confidence を推定。 - confidence に応じて必要な時のみ slow LLM planner をトリガーする非同期機構が肝。

4. どうやって有効だと検証した?

- 公開ベンチマーク R2R と REVERIE で評価。 - 先行 state-of-the-art zero-shot VLN の成功率と同等以上を達成。 - 軌跡あたりの総 token 消費を50%以上削減、3.5倍以上高速に動作。 - legged robot を hotel suite で実証し、屋内環境での効率性と実用性を示す。

5. 議論はある?

- 既存 zero-shot 手法の高遅延・高計算コストという課題を slow-fast 協調と非同期トリガーで解決。 - 効率と成功率の両立を主張するが、具体的な限界や失敗ケース、一般化可能性については要旨からは不明。 - 実ロボット実証は hotel suite に限定されており、他の環境への展開可能性は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている先行 zero-shot VLN 手法(具体的名称は要旨に記載なし)。 - 関連手法として large vision-language models (VLMs) および large language models (LLMs) を用いた zero-shot VLN 研究。 - 同分野の定番として R2R および REVERIE ベンチマークを用いた VLN 研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chaoran Xiong, Litao Wei, Xinhao Hu, Kehui Ma, Ziyi Xia, Zixin Jiang, Zhen Sun, Ling Pei

分類: cs.RO

原文アブストラクト

Recent advances in large vision-language models (VLMs) and large language models (LLMs) have enabled zero-shot approaches to visual language navigation (VLN), where an agent follows natural language instructions using only ego perception and reasoning. However, existing zero-shot methods typically construct a naive observation graph and perform per-step VLM-LLM inference on it, resulting in high latency and computation costs that limit real-time deployment. To address this, we present SFCo-Nav, an efficient zero-shot VLN framework inspired by the principle of slow-fast cognitive collaboration. SFCo-Nav integrates three key modules: 1) a slow LLM-based planner that produces a strategic chain of subgoals, each linked to an imagined object graph; 2) a fast reactive navigator for real-time object graph construction and subgoal execution; and 3) a lightweight asynchronous slow-fast bridge aligns advanced structured, attributed imagined and perceived graphs to estimate navigation confidence, triggering the slow LLM planner only when necessary. To the best of our knowledge, SFCo-Nav is the first slow-fast collaboration zero-shot VLN system supporting asynchronous LLM triggering according to the internal confidence. Evaluated on the public R2R and REVERIE benchmarks, SFCo-Nav matches or exceeds prior state-of-the-art zero-shot VLN success rates while cutting total token consumption per trajectory by over 50% and running more than 3.5 times faster. Finally, we demonstrate SFCo-Nav on a legged robot in a hotel suite, showcasing its efficiency and practicality in indoor environments.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI