日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2506.14608

異なる身体を持つロボットの操作のための潜在行動拡散

Latent Action Diffusion for Cross-Embodiment Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

異なるエンドエフェクタの行動を統一する潜在行動空間を拡散ポリシーで学習し、単一ポリシーで複数ロボットを制御して操作成功率を最大25.3%向上させた。

詳しい要約

1. どんなもの?

- 異なるエンドエフェクタ間の action space を統合する latent action space 上で diffusion policy を学習する手法 - anthropomorphic robotic hands、human hand、parallel jaw gripper を対象 - 単一 policy で multi-robot control と cross-embodiment の skill transfer を狙う - データ不足と action space の異質性という end-to-end learning の課題に対処する研究

2. 先行研究と比べてどこがすごい?

- 従来の end-to-end learning は embodiment ごとの action space の違いが cross-embodiment learning と skill transfer の障壁になっていた - 提案手法は多様な end-effector の action を統一する latent action space を学習し、単一 policy での multi-robot control を可能にする - 異なる end-effector の manipulation data での co-training により最大 25.3% の success rate 改善を報告 - 新しい robot morphology ごとの大規模データ収集の必要性を削減できると主張

3. 技術・手法の肝は?

- contrastive loss で訓練した encoders を用い、anthropomorphic robotic hands、human hand、parallel jaw gripper に対して意味的に整合した latent action space を学習 - その latent action space 上で diffusion policy を学習 - 異なる end-effector の manipulation data で co-training し、単一 policy を multi-robot control に用いる - 詳細なネットワーク構成や loss の定式化は要旨からは不明

4. どうやって有効だと検証した?

- anthropomorphic robotic hands、human hand、parallel jaw gripper の latent action space の意味的整合性を学習・提示 - 異なる end-effector の manipulation data での co-training により、単一 policy で最大 25.3% の manipulation success rate 改善を確認 - 有意な embodiment gap がある中での skill transfer の成功を示す - 具体的なタスク・データセット・実験設定は要旨からは不明

5. 議論はある?

- 統一表現により新規 robot morphology ごとのデータ収集負担を減らし、generalization を加速し、スケーラブルな robotic learning に寄与すると主張 - 一方、latent action space の限界、失敗ケース、embodiment gap の残存課題、評価の一般性については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として diffusion policy、contrastive learning による表現学習、cross-embodiment learning、latent action space を用いた模倣学習の代表的文献を次に読むべき - 具体的な論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Erik Bauer, Elvis Nava, Robert K. Katzschmann

分類: cs.RO

原文アブストラクト

End-to-end learning is emerging as a powerful paradigm for robotic manipulation, but its effectiveness is limited by data scarcity and the heterogeneity of action spaces across robot embodiments. In particular, diverse action spaces across different end-effectors create barriers for cross-embodiment learning and skill transfer. We address this challenge through diffusion policies learned in a latent action space that unifies diverse end-effector actions. We first show that we can learn a semantically aligned latent action space for anthropomorphic robotic hands, a human hand, and a parallel jaw gripper using encoders trained with a contrastive loss. Second, we show that by using our proposed latent action space for co-training on manipulation data from different end-effectors, we can utilize a single policy for multi-robot control and obtain up to 25.3% improved manipulation success rates, indicating successful skill transfer despite a significant embodiment gap. Our approach using latent cross-embodiment policies presents a new method to unify different action spaces across embodiments, enabling efficient multi-robot control and data sharing across robot setups. This unified representation significantly reduces the need for extensive data collection for each new robot morphology, accelerates generalization across embodiments, and ultimately facilitates more scalable and efficient robotic learning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI