日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

全身移動操作arXiv:2610.09117

Workhorse: 人間のデータから頑健な全身ヒューマノイドの移動操作を学習

Workhorse: Learning Robust Whole-Body Humanoid Loco-Manipulation from Human Data

シェア:XThreadsFacebookLINEはてブBluesky

人間の実演データから、視覚プランナーと強化学習トラッカーを組み合わせて、ヒューマノイドロボットの全身移動操作を学習する手法を提案。実機で箱の仕分けやキャッチなどのタスクを実現。

詳しい要約

1. どんなもの?

- 人間のデモンストレーションからヒューマノイドロボットの全身ロコマニピュレーションを学習する手法「Workhorse」を提案。 - 視覚プランナーが胴体・両手首・両足の5リンクの目標姿勢を予測し、強化学習ベースの全身トラッカーがそれを追従。 - 実機Unitree G1で箱の仕分け、キック、投げられた箱のキャッチ、スーツケースの倒し乗り越えを実現。

2. 先行研究と比べてどこがすごい?

- 従来はロボットを用いたデータ収集やリターゲティングが必要だったが、Workhorseはロボット不要の人間デモから直接学習。 - リターゲティングなしで、同じ人間姿勢データから2つのポリシーを別々に訓練。 - 各ポリシーの訓練データを拡張し、展開時に相手が犯す誤りを模倣することでロバスト性を向上。

3. 技術・手法の肝は?

- 視覚プランナー:egocentric RGBと固有感覚から5リンク(胴体、両手首、両足)の目標姿勢を予測。 - 全身トラッカー:強化学習により、プランナーが出力する目標姿勢をロボット上で追従。 - 両ポリシーは同じ記録された人間姿勢で別々に訓練され、リターゲティングは行わない。 - 訓練データ拡張:各ポリシーが展開時に相手ポリシーが生じる誤りを模倣するようにデータを拡張。

4. どうやって有効だと検証した?

- 実機Unitree G1で、箱の仕分け(手とキック)、投げられた箱のキャッチ、スーツケースの倒し乗り越えを実演。 - 箱の仕分け中に、人がロボットを押したり箱を取り上げたりした後の回復を実証。 - シミュレーション環境で、箱の仕分けを77%のエピソードで完了、40 N·sの押しに対して64%で完了。 - 同じデモから再訓練したシミュレーション上の2体目のヒューマノイドは、押しなしで83%のエピソードで箱の仕分けを完了。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。同分野の定番として、human-to-robot imitation learning、whole-body control、reinforcement learning for loco-manipulation に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Songbo Hu, Qiayuan Liao, Yufeng Chi, Kevin Zakka, Yakun Sophia Shao, Pieter Abbeel, Koushil Sreenath

分類: cs.RO, cs.LG

原文アブストラクト

Humanoid robots still struggle to plan contact-rich whole-body manipulation from egocentric RGB and proprioception. Workhorse learns such manipulation from robot-free human demonstrations. A visual planner predicts five-link targets: the poses of the torso, both wrists, and both feet. A reinforcement-learning whole-body tracker follows them on the robot. Both policies train separately on the same recorded human poses, without retargeting. We augment the training data of each policy to imitate the errors that the other makes at deployment. On a real Unitree G1, Workhorse sorts boxes with its hands and a kick, catches a thrown box, and topples and climbs a suitcase. During box sorting, we show recoveries after a person pushes the robot or takes the box away. In a simulated copy of the demonstration room, the system completes box sorting in 77% of episodes, and in 64% under 40 N.s pushes. With both policies retrained from the same demonstrations, a simulated second humanoid completes box sorting in 83% of episodes without pushes.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI