日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

双腕操作arXiv:2606.19897

片腕から両腕へ:単腕エージェントの行動を双腕に拡張する新しいフレームワーク

One-to-Two Acting: A Novel Framework for Single-arm Agent Action Expansion to Dual Arms

シェア:XThreadsFacebookLINEはてブBluesky

単腕のデモンストレーションのみから双腕操作を可能にする階層的アクション拡張フレームワークExS2Dを提案し、シミュレーションと実機で有効性を示した。

詳しい要約

1. どんなもの?

- 単腕エージェントの行動を双腕に拡張するフレームワーク ExS2D を提案。 - 単腕の監督データのみから双腕マニピュレーションを実現。 - 階層的な行動拡張により、テキスト指示から構造化サブタスクを生成し、実行可能な行動にマッピング。 - マルチモーダル大規模言語モデル駆動のコーディネータが衝突のない双腕実行を選択。

2. 先行研究と比べてどこがすごい?

- 双腕デモンストレーションの収集が不要で、単腕の監督のみで双腕操作を実現。 - シミュレーションで平均実行ステップを54.4%削減し、単腕ベースラインと同等の成功率を維持。 - 実機実験で4タスクにおいて、少数の単腕サンプルで双腕実行の信頼性を実証。 - 双腕デモンストレーションを一切使用しない点が先行研究と比べて革新的。

3. 技術・手法の肝は?

- テキスト指示から時間的優先順位を明示的に捉えた構造化サブタスクを生成。 - サブタスク誘導型行動マッピングにより、観測に基づき各サブタスクを実行可能な行動に接地。 - 優先順位を考慮した行動割り当てと同期計画を、マルチモーダル大規模言語モデル駆動のコーディネータが実行。 - 衝突のない双腕実行を選択する階層的フレームワーク。

4. どうやって有効だと検証した?

- シミュレーション実験で平均実行ステップの削減と成功率を評価。 - 実機実験を4つのタスクで実施し、少数の単腕サンプル下での双腕実行の信頼性を検証。 - 双腕デモンストレーションをゼロで使用。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の関連手法として、dual-arm manipulation、hierarchical action expansion、multimodal large language model driven coordination などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Youbin Yao, Nieqin Cao, Mingyan Li, Yan Ding, Fuqiang Gu, Chao Chen

分類: cs.RO

原文アブストラクト

Dual-arm manipulation can improve throughput via parallel execution, but collecting bimanual demonstrations for training is costly and difficult. We present ExS2D, a hierarchical action expansion framework that enables dual-arm manipulation from single-arm supervision. ExS2D first generates structured subtasks from textual instructions while explicitly capturing temporal precedence. It then grounds each subtask into executable actions through subtask-guided action mapping in observation. Finally, precedence-aware action allocation and synchronized planning are performed by a multimodal large language model driven coordinator to select collision-free dual-arm executions. Simulation experiments demonstrate that ExS2D reduces the average execution steps by 54.4% while maintaining a comparable success rate to a single-arm baseline. Real-robot experiments on four tasks further demonstrate the reliability of ExS2D for dual-arm execution under few-shot single-arm samples, while using zero bimanual demonstrations.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI