日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

移動マニピュレーションarXiv:2508.08240

ODYSSEY: 四足歩行ロボットによるオープンワールドでの長期的移動マニピュレーション

ODYSSEY: Open-World Quadrupeds Exploration and Manipulation for Long-Horizon Tasks

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語モデルによる階層的プランナと全身制御ポリシーを統合し、マニピュレータ搭載四足ロボットが言語指示に基づく長期的な移動操作タスクを遂行できるフレームワークを提案した。

詳しい要約

1. どんなもの?

- 四足歩行ロボットにマニピュレータを搭載した mobile manipulation の統合フレームワーク ODYSSEY を提案 - 言語指示に基づく long-horizon タスクを対象に、高レベルなタスク計画と低レベルな whole-body control を統合 - 屋内・屋外の多様なシナリオを扱う、long-horizon mobile manipulation の初の benchmark を提示 - sim-to-real transfer を通じて実環境での汎化・堅牢性を示すことを目指す

2. 先行研究と比べてどこがすごい?

- 既存の LLM ベース計画は tabletop シナリオに限定され、mobile platform の制約された知覚・限られた actuation range に対応できていなかった - 既存 manipulation 戦略は open-world 環境の多様な物体配置に対する汎化が不十分だった - 非構造環境での高い機動性と精密な end-effector 制御の両立は未検討だった - これら三点に対し、egocentric perception 対応の階層的 planner と whole-body policy で対処する点が新規

3. 技術・手法の肝は?

- vision-language model を中核とする階層的 planner を導入し、long-horizon 指示の分解と精密な action 実行を実現 - egocentric perception 下での言語条件付きタスクに対応 - 制御レベルでは、困難な地形での堅牢な協調を達成する新規 whole-body policy を設計 - 高レベル計画と低レベル whole-body control をシームレスに統合する枠組み

4. どうやって有効だと検証した?

- 屋内・屋外の多様なシナリオを含む long-horizon mobile manipulation の初の benchmark を構築し評価 - sim-to-real transfer を成功させ、実世界展開での汎化と堅牢性を実証 - 詳細な定量結果・比較手法は要旨からは不明

5. 議論はある?

- 非構造環境における legged manipulator の実用性・実現可能性を支持する結果を示す - 汎用的ロボットアシスタントによる複雑・動的タスクの実現可能性に寄与 - 限界や失敗事例、計算コスト、安全性などの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として vision-language model ベースのタスク計画、whole-body control、sim-to-real transfer、legged mobile manipulation の代表的文献を次に読むべき - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kaijun Wang, Liqin Lu, Mingyu Liu, Jianuo Jiang, Zeju Li, Bolin Zhang, Wancai Zheng, Xinyi Yu, Hao Chen, Chunhua Shen

分類: cs.RO, cs.CV

原文アブストラクト

Language-guided long-horizon mobile manipulation has long been a grand challenge in embodied semantic reasoning, generalizable manipulation, and adaptive locomotion. Three fundamental limitations hinder progress: First, although large language models have improved spatial reasoning and task planning through semantic priors, existing implementations remain confined to tabletop scenarios, failing to address the constrained perception and limited actuation ranges of mobile platforms. Second, current manipulation strategies exhibit insufficient generalization when confronted with the diverse object configurations encountered in open-world environments. Third, while crucial for practical deployment, the dual requirement of maintaining high platform maneuverability alongside precise end-effector control in unstructured settings remains understudied. In this work, we present ODYSSEY, a unified mobile manipulation framework for agile quadruped robots equipped with manipulators, which seamlessly integrates high-level task planning with low-level whole-body control. To address the challenge of egocentric perception in language-conditioned tasks, we introduce a hierarchical planner powered by a vision-language model, enabling long-horizon instruction decomposition and precise action execution. At the control level, our novel whole-body policy achieves robust coordination across challenging terrains. We further present the first benchmark for long-horizon mobile manipulation, evaluating diverse indoor and outdoor scenarios. Through successful sim-to-real transfer, we demonstrate the system's generalization and robustness in real-world deployments, underscoring the practicality of legged manipulators in unstructured environments. Our work advances the feasibility of generalized robotic assistants capable of complex, dynamic tasks. Our project page: https://kaijwang.github.io/odyssey.github.io/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI