日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

言語誘導ナビゲーションarXiv:2610.33794

1回のスキャンで十分:言語誘導ナビゲーションのためのデモンストレーション不要な適応

One Scan is Enough: Demonstration-Free Adaptation for Language-Guided Navigation

シェア:XThreadsFacebookLINEはてブBluesky

iPhoneでの短時間スキャンから訓練環境と指示付きナビゲーションエピソードを自動生成し、人間のデモなしで言語誘導ナビゲーション方策を新しい建物に適応させる手法を提案した。

詳しい要約

1. どんなもの?

- 言語誘導ナビゲーションのVLA policyを新しい建物へ展開する際の適応手法 - 人間によるteleoperationデモの代わりに、iPhoneによる1回の短時間scanを利用 - Scan2Instructionがscanを完全なtraining environmentへ変換し、grounded instructions付きの実行可能なnavigation episodesを自動合成 - PRPT-KSが再構成sceneから直接読み取るclosed-form Pareto utilityでpolicyを適応 - 学習済みcriticもhuman labelsも不要 - 提案システムRealNavとして実環境で評価

2. 先行研究と比べてどこがすごい?

- 従来は新環境ごとにteleoperationで新規trajectoryを収集する必要があり、スケールしない - 公開benchmarkのVLAはlayout・appearance・language driftによりsceneごとに性能劣化 - 本研究はhuman demonstrationを単一のiPhone scanに置き換え、demonstration-freeなscene adaptationを実現 - 実環境5つでRealNavが85%のreal-robot success rate、human demonstrationsでpost-trainしたbaselineは49% - 未scan領域でも82%対41%と大幅に上回る

3. 技術・手法の肝は?

- Scan2Instruction: 単一scanから完全なtraining environmentを構築し、grounded instructions付きの実行可能なnavigation episodesを自動合成 - PRPT-KS: 再構成sceneから直接読み取るclosed-form Pareto utilityによりpolicyを適応 - 学習済みcriticやhuman labelsを必要としない設計 - 詳細なアルゴリズムは要旨からは不明

4. どうやって有効だと検証した?

- 5つの実環境でreal-robot実験を実施 - RealNavのreal-robot success rateは85%、human demonstrationsでpost-trainしたRealNav baselineは49% - 同一建物内の未scan領域でも82%対41%と優位 - 具体的な評価プロトコルや被験者数は要旨からは不明

5. 議論はある?

- demonstration-freeなscene adaptationを実用レベルにした点を主張 - 未scan領域への汎化性能の限界や、scan品質・環境多様性への依存については要旨からは不明 - 失敗事例やablationの議論は要旨からは不明

6. 次に読むべき論文は?

- RealNav baseline(human demonstrationsでpost-trainした手法) - 公開benchmarkのVLA(具体的名称は要旨からは不明) - Scan2InstructionおよびPRPT-KSの原論文・関連手法 - 言語誘導ナビゲーション分野の定番手法(例: CLIP-based navigation, Habitat benchmark関連研究)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhuoyuan Yu, Yuxing Long, Du Wang, Junyang Wang, Hongwei Fan, Hao Dong

分類: cs.RO, cs.AI, cs.CL, cs.CV, cs.LG

原文アブストラクト

Deploying a language-guided navigation policy in a new building usually means watching it fail. Public-benchmark VLAs degrade scene by scene as layout, appearance, and language drift, and the standard fix of teleoperating fresh trajectories on site does not scale. We replace human demonstration with a single brief iPhone scan. Scan2Instruction compiles that scan into a complete training environment, automatically synthesizing executable navigation episodes with grounded instructions. PRPT-KS then adapts the policy through a closed-form Pareto utility read directly off the reconstructed scene, with no learned critic and no human labels. Across five real environments, the two designs together drive our RealNav to an 85% real-robot success rate, compared with 49% for a RealNav baseline post-trained on human demonstrations, and still achieve 82% in unscanned regions of the same buildings, compared with 41% for the same baseline. Our work turns demonstration-free scene adaptation for language-guided navigation from an aspiration into a working reality.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI