日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2609.39207

ASENA: 自己進化型エージェントによる身体性ナビゲーション

ASENA: Self-evolving Agents for Embodied Navigation

シェア:XThreadsFacebookLINEはてブBluesky

コーディングエージェントがプログラムを書いて実行・修正・経験を蓄積しながらロボットをナビゲーションさせるシステムを提案し、4Bの単眼ナビゲーション方策と組み合わせてR2RやRxRで高性能を達成した。

詳しい要約

1. どんなもの?

- 本論文はASENAを提案する。 - 汎用コーディングエージェントをロボットのセンシング、計算、監督実行、永続経験に接続するembodied agent system。 - エージェントはプログラムを書いて実行し、記録結果を検査し、失敗を修復し、ノートと実行可能スキルを再利用できる。モデル重みは固定。 - ASENA-VLNも導入。 - 4B monocular navigation policyで、このプログラマブルシステム内のオプションツール。 - 共有vision-language decoderでbody-frame trajectoriesを予測。 - route instructions、visual question answering、新規データセットで訓練。

2. 先行研究と比べてどこがすごい?

- 先行研究と比べて、ASENAはコーディングエージェントをembodied navigationに統合し、モデル重みを固定したまま永続的ワークスペース進化とシミュレータフィードバックを実現。 - ASENA-VLNはスタンドアロンでR2R 68.7%、RxR 70.2%の成功率を達成し、state-of-the-art。 - コーディングエージェントと統合すると、agentic benchmarksで成功率が11ポイント向上し、実行時間も短縮。 - 反復タスクで成功率が大幅改善(R2R 72%→98%、RxR 65%→89%)。 - embodied question answeringでstate-of-the-art精度をより少ないinteraction stepsで達成。

3. 技術・手法の肝は?

- ASENAの肝は、汎用コーディングエージェントをロボットのセンシング、計算、監督実行、永続経験に接続する点。 - エージェントはプログラムを書き実行し、記録結果を検査し、失敗を修復し、ノートと実行可能スキルを再利用。 - モデル重みは固定。 - ASENA-VLNは4B monocular navigation policy。 - 共有vision-language decoderでbody-frame trajectoriesを予測。 - route instructions、visual question answering、新規のgeometry-derived atomic navigation tasksデータセットで訓練。 - 拡張ルートと短horizon行動の両方を予測。

4. どうやって有効だと検証した?

- ASENA-VLNのスタンドアロン性能をR2RとRxRで評価。成功率68.7%と70.2%。 - コーディングエージェントとの統合で、agentic benchmarksの成功率が11ポイント向上し、実行時間短縮。 - 永続的ワークスペース進化とシミュレータフィードバックにより、反復100タスクサブセットで10パス後、R2Rで72%→98%、RxRで65%→89%に改善。 - embodied question answeringでstate-of-the-art精度をより少ないinteraction stepsで達成。 - Unitree G1での実世界デモで、検索、視覚検査、空間推論、合成ジェスチャを事前マップなしで実行。

5. 議論はある?

- 議論の詳細は要旨からは不明。 - ただし、オンラインプログラミングがルート追従や事前定義スキルを超えてロボット行動を拡張することを示唆。 - 限界や課題については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:R2R、RxR、embodied question answering、Unitree G1。 - 関連手法:vision-language decoder、monocular navigation policy、coding agents。 - 同分野の定番:Vision-and-Language Navigation (VLN)、Embodied Question Answering (EQA)、Sim-to-Real transfer。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: An-Chieh Cheng, Isabella Liu, Edmund Bu, Johan Bjorck, Hongxu Yin, Zhengyi Luo, Jan Kautz, Linxi "Jim" Fan, Yuke Zhu, Sifei Liu

分類: cs.RO

原文アブストラクト

We present ASENA, an embodied agent system that connects general-purpose coding agents to robot sensing, computation, supervised execution, and persistent experience. Agents can write and execute programs, inspect recorded outcomes, repair failures, and reuse notes and executable skills while keeping their model weights fixed. We further introduce ASENA-VLN, a 4B monocular navigation policy that serves as an optional tool within this programmable system. ASENA-VLN predicts body-frame trajectories for both extended routes and short-horizon behaviors using a shared vision-language decoder trained on route instructions, visual question answering, and a newly curated dataset of geometry-derived atomic navigation tasks. As a standalone policy, ASENA-VLN achieves state-of-the-art success rates of 68.7% on R2R and 70.2% on RxR. When integrated with a coding agent, learned navigation improves ASENA's success rate by 11 percentage points on both agentic benchmarks while reducing execution time. Through persistent workspace evolution and simulator feedback, ten passes over recurring 100-task subsets further improve success from 72% to 98% on R2R and from 65% to 89% on RxR. On embodied question answering, ASENA achieves state-of-the-art accuracy with fewer interaction steps. Finally, real-world demonstrations on a Unitree G1 combine search, visual inspection, spatial reasoning, and synthesized gestures without a pre-built map, illustrating how online programming extends robot behavior beyond route following and predefined skills.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI