日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

全身操作arXiv:2602.06643

ヒューマノイド操作インターフェース:ロボット不要の実演による全身操作

Humanoid Manipulation Interface: Humanoid Whole-Body Manipulation from Robot-Free Demonstrations

シェア:XThreadsFacebookLINEはてブBluesky

ポータブルな装着型デバイスで人間の全身動作を計測し、階層的な学習パイプラインを通じてヒューマノイドの多様な全身操作スキルを実環境で獲得するフレームワークを提案。

詳しい要約

1. どんなもの?

- 本論文は、Humanoid Manipulation Interface (HuMI) を提案する。 - 人間型ロボットの全身マニピュレーションを、ロボットなしのデモンストレーションから学習するための携帯可能で効率的なフレームワーク。 - 多様な環境で様々な全身タスクを学習可能。 - 5つの全身タスク(kneeling, squatting, tossing, walking, bimanual manipulation)で評価。

2. 先行研究と比べてどこがすごい?

- 従来のアプローチはteleoperationやvisual sim-to-real reinforcement learningに依存し、ハードウェアの物流や複雑な報酬設計に悩まされていた。 - HuMIはロボット不要のデータ収集を可能にし、teleoperationと比較してデータ収集効率が3倍向上。 - 未見環境での成功率70%を達成し、従来の制御された環境に限定されがちな自律スキルを拡張。

3. 技術・手法の肝は?

- 携帯可能なハードウェアを用いて、人間の全身運動を豊富にキャプチャし、ロボット不要のデータ収集を実現。 - 収集データを階層的な学習パイプラインに投入し、人間の運動を器用で実行可能なヒューマノイドスキルに変換。 - これにより、多様な全身マニピュレーションタスクを学習。

4. どうやって有効だと検証した?

- 5つの全身タスク(kneeling, squatting, tossing, walking, bimanual manipulation)で広範な実験を実施。 - teleoperationと比較してデータ収集効率が3倍向上することを示した。 - 未見環境において70%の成功率を達成。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:teleoperation、visual sim-to-real reinforcement learning。 - 関連手法として、humanoid whole-body manipulationの分野で一般的なteleoperationベースの手法やsim-to-real強化学習が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruiqian Nai, Boyuan Zheng, Junming Zhao, Haodong Zhu, Sicong Dai, Zunhao Chen, Yihang Hu, Yingdong Hu, Tong Zhang, Chuan Wen, Yang Gao

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Current approaches for humanoid whole-body manipulation, primarily relying on teleoperation or visual sim-to-real reinforcement learning, are hindered by hardware logistics and complex reward engineering. Consequently, demonstrated autonomous skills remain limited and are typically restricted to controlled environments. In this paper, we present the Humanoid Manipulation Interface (HuMI), a portable and efficient framework for learning diverse whole-body manipulation tasks across various environments. HuMI enables robot-free data collection by capturing rich whole-body motion using portable hardware. This data drives a hierarchical learning pipeline that translates human motions into dexterous and feasible humanoid skills. Extensive experiments across five whole-body tasks--including kneeling, squatting, tossing, walking, and bimanual manipulation--demonstrate that HuMI achieves a 3x increase in data collection efficiency compared to teleoperation and attains a 70% success rate in unseen environments.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI