日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

両腕操作/エネルギーに基づくモデル/ポリシー転移arXiv:2603.20236

EnergyAction: エネルギーに基づくモデルによる片腕から両腕への動作合成

EnergyAction: Unimanual to Bimanual Composition with Energy-Based Models

シェア:XThreadsFacebookLINEはてブBluesky

本論文では、片腕操作ポリシーをエネルギーに基づくモデルとして表現し、その合成特性を利用して両腕操作タスクへ転移するフレームワークを提案する。時間的・空間的な協調メカニズムと適応的ノイズ除去戦略を導入し、高品質な両腕動作を効率的に生成する。

詳しい要約

1. どんなもの?

- 単腕操作ポリシーを双腕タスクに合成的に転移するフレームワーク EnergyAction を提案。 - Energy-Based Models (EBMs) を基盤とし、左右の腕の行動を合成する。 - 双腕デモデータの不足と dual-arm 行動の調整の複雑さに対処。 - シミュレーションと実世界タスクで有効性を検証。

2. 先行研究と比べてどこがすごい?

- 既存手法は大規模な双腕データセットに依存するか、事前学習済み単腕ポリシーを効果的に活用できない。 - EnergyAction は単腕ポリシーを EBMs としてモデル化し、その合成的性質を利用して双腕ポリシーに融合。 - 最小限の双腕データで優れた性能を達成。

3. 技術・手法の肝は?

- 個々の単腕ポリシーを EBMs としてモデル化し、左右の腕の行動を合成。 - エネルギー制約による時間的・空間的調整メカニズムを導入し、時間的一貫性と空間的実現可能性を確保。 - 行動品質評価に基づき denoising ステップを動的に適応させる2つの energy-aware denoising 戦略を提案。 - 固定ステップ denoising と比較して計算効率を維持しつつ高品質な行動を生成。

4. どうやって有効だと検証した?

- シミュレーションと実世界タスクの両方で実験を実施。 - 最小限の双腕データで優れた性能を達成することを示した。 - 具体的な評価指標やベースラインとの比較詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として Energy-Based Models (EBMs) や unimanual manipulation policies が挙げられる。 - 同分野の定番として bimanual manipulation や imitation learning に関する研究が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mingchen Song, Xiang Deng, Jie Wei, Dongmei Jiang, Liqiang Nie, Weili Guan

分類: cs.RO

原文アブストラクト

Recent advances in unimanual manipulation policies have achieved remarkable success across diverse robotic tasks through abundant training data and well-established model architectures. However, extending these capabilities to bimanual manipulation remains challenging due to the lack of bimanual demonstration data and the complexity of coordinating dual-arm actions. Existing approaches either rely on extensive bimanual datasets or fail to effectively leverage pre-trained unimanual policies. To address this limitation, we propose \textbf{EnergyAction}, a novel framework that compositionally transfers unimanual manipulation policies to bimanual tasks through the Energy-Based Models (EBMs). Specifically, our method incorporates three key innovations. First, we model individual unimanual policies as EBMs and leverage their compositional properties to compose left and right arm actions, enabling the fusion of unimanual policies into a bimanual policy. Second, we introduce an energy-based temporal-spatial coordination mechanism through energy constraints, ensuring the generated bimanual actions are both temporal coherence and spatial feasibility. Third, we propose two different energy-aware denoising strategies that dynamically adapt denoising steps based on action quality assessment. These strategies ensure the generation of high-quality actions while maintaining superior computational efficiency compared to fixed-step denoising approaches. Experimental results demonstrate that EnergyAction effectively transfers unimanual knowledge to bimanual tasks, achieving superior performance on both simulated and real-world tasks with minimal bimanual data.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI