日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2610.14911

指揮官-実行者連携によるスケーラブルな複数人協調マニピュレーション

Scalable Multi-Human Cooperative Manipulation via Commander-Executor Coordination

シェア:XThreadsFacebookLINEはてブBluesky

複数エージェントでの複雑な協調物体操作を実現するため、指揮官が役割分担と物体中心の協調計画を立案し、実行者が物理ベースの低レベル方策を学習する階層的フレームワークを提案。

詳しい要約

1. どんなもの?

- 複数人型エージェントによる協調物体操作を扱う研究 - 役割依存・長期的・逐次的な協調操作を対象 - commander-executor 階層フレームワークを提案 - commander が意味・幾何計画を行い、役割別サブタスクと物体中心の協調計画を生成 - executor が物理ベースの低レベル方策を学習し、協調的な人-物体相互作用を実現

2. 先行研究と比べてどこがすごい?

- 既存手法は単純な協調運搬タスクは扱えるが、役割依存・長期的・逐次的な協調操作は苦手 - 提案手法はこれら複雑な協調タスクを異なる方法で複数エージェントが遂行可能 - 2体から多体へのスケールが可能 - 最先端手法と比較して高い成功率を達成

3. 技術・手法の肝は?

- commander が指示とシーン情報を統合し、joint semantic and geometric planning を実施 - タスクを役割別サブタスクに分解し、共有の object-centric coordination plan を生成 - 計画には実行タイミング、目標位置、各エージェントの操作行動を指定 - executor は commander の高レベル戦略と各エージェントの局所観測に条件付け - solo-to-cooperative curriculum により低レベル物理方策を学習 - 計画された物体軌道が共有協調目標、root positions と grasping instructions が役割依存の実行手がかりを提供

4. どうやって有効だと検証した?

- 多様な物体操作タスクで評価 - 異なる協調タイプを組み合わせた長期的タスクの実行能力を実証 - 2体から多体への協調スケーリングを確認 - 広範な実験で最先端手法より高い成功率を示す

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 同分野の定番として multi-agent reinforcement learning、humanoid control、hierarchical planning に関する論文が挙げられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Buzhen Huang, Xingchen Wu, Yuanwang Yang, Chenyi Xie, Kun Li

分類: cs.RO, cs.CV

原文アブストラクト

Multi-human cooperative object manipulation is a highly challenging topic in humanoid control. While existing methods can handle simple collaborative carrying tasks, they struggle with role-dependent, long-horizon, and sequential cooperative manipulation. To address this issue, we propose a hierarchical commander-executor framework that enables multiple agents to accomplish complex collaborative tasks in distinct ways. Specifically, a commander combines instructions and scene information for joint semantic and geometric planning. It then decomposes the task into role-specific subtasks and generates shared object-centric coordination plans, specifying execution timing, target positions, and manipulation actions for each agent. Conditioned on the commander's high-level strategy and each agent's local observations, the executor learns a low-level physics-based policy through a solo-to-cooperative curriculum to realize coordinated human-object interactions. The planned object trajectory provides a shared coordination target, while root positions and grasping instructions specify role-dependent execution cues. We evaluate our method on a variety of object manipulation tasks, demonstrating its ability to execute long-horizon tasks that combine different types of collaboration and to scale from two-agent to multi-agent cooperation. Extensive experiments further show that our approach achieves higher success rates compared to state-of-the-art methods. Code will be made publicly available at https://github.com/TJU-3DV/Co-Manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI