DreamControl: 拡散モデル誘導による人間模倣型全身ヒューマノイドのシーンインタラクション制御
DreamControl: Human-Inspired Whole-Body Humanoid Control for Scene Interaction via Guided Diffusion
人間の動作データで学習した拡散モデルを事前分布として強化学習を誘導し、ヒューマノイドが全身で物体操作やシーンインタラクションを行うスキルを獲得する手法を提案。Unitree G1で実機検証も行った。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Dvij Kalaria, Sudarshan S Harithas, Pushkal Katara, Sangkyung Kwak, Sarthak Bhagat, Shankar Sastry, Srinath Sridhar, Sai Vemprala, Ashish Kapoor, Jonathan Chung-Kuan Huang
分類: cs.RO, cs.AI, cs.LG
原文アブストラクト
We introduce DreamControl, a novel methodology for learning autonomous whole-body humanoid skills. DreamControl leverages the strengths of diffusion models and Reinforcement Learning (RL): our core innovation is the use of a diffusion prior trained on human motion data, which subsequently guides an RL policy in simulation to complete specific tasks of interest (e.g., opening a drawer or picking up an object). We demonstrate that this human motion-informed prior allows RL to discover solutions unattainable by direct RL, and that diffusion models inherently promote natural looking motions, aiding in sim-to-real transfer. We validate DreamControl's effectiveness on a Unitree G1 robot across a diverse set of challenging tasks involving simultaneous lower and upper body control and object interaction. Project website at https://genrobo.github.io/DreamControl/
関連論文
- 運動追従とバランス制御を分離したヒューマノイド全身制御フレームワークDKWBCヒューマノイド全身制御
- ForPC: 力覚対応全身制御によるヒューマノイドの精密なカート押しヒューマノイド全身制御
- 単一の微分可能ワールドモデルでヒューマノイド全身制御をスケールさせる手法ヒューマノイド全身制御
- 全身ヒューマノイド制御における高精度SE(3)エンドエフェクタ追従ヒューマノイド全身制御
- iGPC:物体と相互作用するヒューマノイドのための生成的運動事前分布ヒューマノイド全身制御
- BRACE: 力と地形を考慮したヒューマノイド全身運動追従のための参照適応ヒューマノイド全身制御
