日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

データ生成/移動操作arXiv:2605.27724

HumanoidMimicGen: 全身計画による移動操作のためのデータ生成

HumanoidMimicGen: Data Generation for Loco-Manipulation via Whole-Body Planning

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドの移動と操作を模倣学習で訓練するためのデータを自動生成する手法を提案。少数の実演から全身スキルを適応させ、多様なシーンで安定したデータを生成し、実データのみで訓練した場合より20%性能が向上した。

詳しい要約

1. どんなもの?

- どんなもの? - HumanoidMimicGen: ヒューマノイドのloco-manipulation(歩行と操作)のためのデータ生成手法 - 模倣学習に必要な大量のデモンストレーションを自動合成 - 少数のソースデモンstrationからcontact-richなwhole-bodyスキルを新状態に適応 - 物体姿勢の変化に一般化 - 単腕・双腕スキルとwhole-body locomotion/manipulation planningを交互に実行 - 多様なシーンとレイアウトで安定・衝突のないデータを生成 - 新たなシミュレーションloco-manipulationベンチマーク(9タスク)を導入

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 既存のデータ生成アルゴリズムはmanipulator向けで、ヒューマノイドには無効 - ヒューマノイドの高次元複合行動空間(腕・脚・胴体)に対応できない問題を解決 - 少数のソースデモからcontact-richなwhole-bodyスキルを新状態に適応可能 - 物体姿勢の変化に一般化 - 単腕・双腕スキルとwhole-body locomotion/manipulation planningを交互に実行 - 多様なシーンとレイアウトで安定・衝突のないデータを生成 - 大規模データセットを自動生成し、模倣学習を可能に - データ生成とポリシー学習の決定がモデル性能に与える影響を系統的に研究可能

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - 少数のソースデモンstrationからcontact-richなwhole-bodyスキルを新状態に適応 - 物体姿勢の変化に一般化 - 単腕・双腕スキルとwhole-body locomotion/manipulation planningを交互に実行 - 多様なシーンとレイアウトで安定・衝突のないデータを生成 - 詳細は要旨からは不明

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - 新たなシミュレーションloco-manipulationベンチマーク(9タスク)を導入 - ヒューマノイドのloco-manipulation能力をテスト - HumanoidMimicGenが大規模データセットを自動生成し、模倣学習を可能にすることを実証 - データ生成とポリシー学習の決定がモデル性能に与える影響を系統的に研究 - whole-body visuomotorポリシーをHumanoidMimicGen生成データで共訓練すると、実世界データのみで訓練した場合より20%性能向上

5. 議論はある?

- 議論はある? - 要旨からは不明

6. 次に読むべき論文は?

- 次に読むべき論文は? - 要旨で参照/比較されている研究や関連手法は明示されていない - 同分野の定番として、模倣学習(imitation learning)、データ生成(data generation)、ヒューマノイドロボティクス(humanoid robotics)、loco-manipulation、whole-body planning、visuomotor policy learning に関する論文が挙げられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kevin Lin, Ajay Mandlekar, Caelan Reed Garrett, Nikita Chernyadev, Yu Fang, Runyu Ding, Yuqi Xie, Justin Tran, Linxi Fan, Yuke Zhu

分類: cs.RO, cs.AI

原文アブストラクト

Imitation learning is a promising approach for training humanoid robots to both walk and manipulate, but it requires a large number of demonstrations, which are time-intensive and difficult to collect via teleoperation. Existing data-generation algorithms can automatically synthesize demonstrations for manipulators, but they are ineffective on humanoids because their high-dimensional composite action spaces involve arms, legs, and torsos. We present HumanoidMimicGen, a method for generating humanoid legged loco-manipulation data. Our method adapts contact-rich whole-body skills from a handful of source demonstrations to new states, generalizing across changes in object pose. By interleaving these single- and dual-arm skills with whole-body locomotion and manipulation planning, the method generates stable, collision-free data across diverse scenes and layouts. To evaluate our approach, we introduce a new simulated loco-manipulation benchmark containing nine diverse tasks that test humanoid loco-manipulation capabilities. There, we demonstrate that HumanoidMimicGen automatically generates large datasets for imitation learning and enables a systematic study of how data generation and policy learning decisions impact model performance. We show that whole-body visuomotor policies co-trained with data generated by HumanoidMimicGen outperform those trained only on real-world data by 20%.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI