日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

モーショントラッキングarXiv:2602.23832

OmniTrack: 物理的に整合した参照動作による汎用モーショントラッキング

OmniTrack: General Motion Tracking via Physics-Consistent Reference

シェア:XThreadsFacebookLINEはてブBluesky

人間の動作データをロボットで追従させる際、体格差やノイズによる物理的に不可能な参照動作を、シミュレーション上の特権方策で実行可能な動作に変換してから追従方策を学習する枠組みを提案。実機で長時間安定した追従やアクロバティック動作を実現。

詳しい要約

1. どんなもの?

- 人間の豊富な運動データから運動追跡を学習し、humanoid robotの一般的な制御を実現する基盤タスクを扱う。 - 人間とロボットの形態・動力学の不一致やデータノイズにより、参照運動に浮遊や貫通などの物理的に不可能なアーティファクトが生じる問題に対処。 - OmniTrackは、物理的実現可能性と一般的な運動追跡を明示的に分離する一般的な追跡フレームワーク。 - 第1段階で特権的一般主義ポリシーがシミュレーションで軌道ロールアウトを通じて物理的に妥当な運動を生成。 - 第2段階で一般制御ポリシーがこれらの物理的に実現可能な運動を追跡するよう訓練。 - 実ロボットへの安定かつ一貫した制御転送を保証。

2. 先行研究と比べてどこがすごい?

- 従来の運動追跡では、人間とロボットの形態・動力学の不一致やデータノイズによる物理的に不可能な参照運動が、追跡精度と安定性の間の矛盾を生じさせていた。 - OmniTrackは物理的実現可能性を明示的に分離することで、この矛盾を解決。 - 追跡精度を向上させ、未見の運動への強い一般化を示す。 - 実世界テストで1時間にわたる一貫した安定した追跡を達成し、フリップやカートホイールなどの複雑なアクロバティック運動を含む。 - 人間スタイルの安定した動的なオンラインテレオペレーションをサポート。

3. 技術・手法の肝は?

- 2段階のフレームワーク。 - 第1段階:特権的一般主義ポリシーがシミュレーションで軌道ロールアウトを通じて、ロボットの動力学に厳密に従う物理的に妥当な運動を生成。 - 第2段階:一般制御ポリシーがこれらの物理的に実現可能な運動を追跡するよう訓練され、実ロボットへの安定かつ一貫した制御転送を保証。 - 物理的実現可能性と一般的な運動追跡を明示的に分離。

4. どうやって有効だと検証した?

- 実験により、OmniTrackが追跡精度を向上させ、未見の運動への強い一般化を示すことを確認。 - 実世界テストで1時間にわたる一貫した安定した追跡を達成。 - フリップやカートホイールなどの複雑なアクロバティック運動を含む。 - 人間スタイルの安定した動的なオンラインテレオペレーションをサポートすることを示す。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、humanoid robotの運動追跡や強化学習ベースの制御に関する研究(例:DeepMimic、AMPなど)が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yuhan Li, Peiyuan Zhi, Yunshen Wang, Tengyu Liu, Sixu Yan, Wenyu Liu, Xinggang Wang, Baoxiong Jia, Siyuan Huang

分類: cs.RO

原文アブストラクト

Learning motion tracking from rich human motion data is a foundational task for achieving general control in humanoid robots, enabling them to perform diverse behaviors. However, discrepancies in morphology and dynamics between humans and robots, combined with data noise, introduce physically infeasible artifacts in reference motions, such as floating and penetration. During both training and execution, these artifacts create a conflict between following inaccurate reference motions and maintaining the robot's stability, hindering the development of a generalizable motion tracking policy. To address these challenges, we introduce OmniTrack, a general tracking framework that explicitly decouples physical feasibility from general motion tracking. In the first stage, a privileged generalist policy generates physically plausible motions that strictly adhere to the robot's dynamics via trajectory rollout in simulation. In the second stage, the general control policy is trained to track these physically feasible motions, ensuring stable and coherent control transfer to the real robot. Experiments show that OmniTrack improves tracking accuracy and demonstrates strong generalization to unseen motions. In real-world tests, OmniTrack achieves hour-long, consistent, and stable tracking, including complex acrobatic motions such as flips and cartwheels. Additionally, we show that OmniTrack supports human-style stable and dynamic online teleoperation, highlighting its robustness and adaptability to varying user inputs.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI