日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

全身動作追跡/基盤モデルarXiv:2605.15336

HoloMotion-1 技術報告書:ゼロショット全身動作追跡のための人型ロボット動作基盤モデル

HoloMotion-1 Technical Report

シェア:XThreadsFacebookLINEはてブBluesky

大規模なハイブリッド動作データ(動画再構成・モーションキャプチャ等)で制御ポリシーを学習し、未見の動作や実機へゼロショットで汎化する人型ロボットの全身動作追跡基盤モデルを提案した。

詳しい要約

1. どんなもの?

HoloMotion-1は、zero-shot whole-body motion trackingのためのhumanoid motion foundation model。大規模hybrid motion corpusでcontrol-policyを訓練し、in-the-wild動画から再構成したmotionを多様性の主要源とし、curated motion-captureとin-house motion dataで高忠実度のsupervisionとdeployment向けcoverageを補う。

2. 先行研究と比べてどこがすごい?

従来のMoCap-only trainingを超え、video-reconstructed motionsによりbehavior、capture conditions、motion stylesの範囲を大幅に拡大。複数のunseen motion benchmarksでprior methodsよりtracking accuracyを有意に改善し、task-specific fine-tuningなしで実humanoid robotに転移。

3. 技術・手法の肝は?

大容量temporal modeling、KV-cache inferenceによるreal-time controlを可能にするsparsely activated Mixture-of-Experts Transformer、長いmotion sequenceでの学習効率を高めるsequence-level training strategyを統合。reconstruction noise、source-domain mismatch、不均一なmotion品質、大きなbehavior variation下のtemporal modelingに対処。

4. どうやって有効だと検証した?

複数のunseen motion benchmarksで実験し、多様なmotion typesとcapture conditionsにわたり頑健にgeneralizeすること、prior methodsよりtracking accuracyが有意に向上すること、task-specific fine-tuningなしで実humanoid robotに直接transferすることを示した。

5. 議論はある?

heterogeneous dataからの学習に伴うreconstruction noise、source-domain mismatch、uneven motion quality、大きなbehavior variation下でのtemporal modelingの必要性を課題として挙げ、これらに対処する設計を統合。詳細な限界や失敗事例は要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている具体的な先行研究は不明。関連手法としてMoCap-only training、video-reconstructed motions、Mixture-of-Experts Transformer、KV-cache inference、humanoid motion trackingの定番研究を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Maiyue Chen, Kaihui Wang, Bo Zhang, Xihan Ma, Zhiyuan Yang, Yi Ren, Qijun Huang, Zihao Zhu, Yucheng Wang, Zhizhong Su

分類: cs.RO, cs.AI

原文アブストラクト

In this report, we present HoloMotion-1, a humanoid motion foundation model for zero-shot whole-body motion tracking. A key innovation of HoloMotion-1 is to scale control-policy training with a large-scale hybrid motion corpus, where video-reconstructed motions from in-the-wild videos provide the dominant source of motion diversity, while curated motion-capture and in-house motion data provide higher-fidelity supervision and deployment-oriented coverage. This data regime enables HoloMotion-1 to move beyond conventional MoCap-only training and exposes the policy to substantially broader behaviors, capture conditions, and motion styles. Learning from such heterogeneous data introduces new challenges, including reconstruction noise, source-domain mismatch, uneven motion quality, and the need for temporal modeling under large behavioral variation. To address these challenges, HoloMotion-1 integrates large-capacity temporal modeling, a sparsely activated Mixture-of-Experts Transformer with KV-cache inference for real-time control, and a sequence-level training strategy that improves learning efficiency on extended motion sequences. Extensive experiments on multiple unseen motion benchmarks show that HoloMotion-1 generalizes robustly across diverse motion types and capture conditions, significantly improves tracking accuracy over prior methods, and transfers directly to a real humanoid robot without task-specific fine-tuning.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI