日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ヒューマノイド制御arXiv:2605.14417

身体が動く前に:言語条件付きヒューマノイド制御のための予測的関節意図の学習

Before the Body Moves: Learning Anticipatory Joint Intent for Language-Conditioned Humanoid Control

シェア:XThreadsFacebookLINEはてブBluesky

言語指示に基づくヒューマノイドの全身制御において、将来の接触変化やバランス準備を明示的に予測する階層的フレームワークDAJIを提案し、予測的関節意図を学習することで追従性能と生成品質を向上させた。

詳しい要約

1. どんなもの?

- 言語条件付きヒューマノイド制御のための階層フレームワークDAJIを提案。 - DAJIは、言語生成と閉ループ制御の間に「anticipatory joint-intent interface」を学習。 - DAJI-Actはfuture-aware teacherを蒸留し、展開可能なdiffusion action policyをstudent-driven rolloutsで獲得。 - DAJI-Flowは言語とintent historyからfuture intent chunksを自己回帰生成。 - 実験でanticipatory latent learning、単一指示生成、ストリーミング指示追従に強い結果。

2. 先行研究と比べてどこがすごい?

- 既存の言語条件付きヒューマノイドは、低レベルトラッカーが反応的に修復するkinematic referencesを生成するか、latent/action policiesの出力が将来の接触変化・支持交換・バランス準備を明示的に符号化しない。 - DAJIは、将来の物理遷移を予期するjoint-intent interfaceを学習し、実行可能かつanticipatoryな制御表現を提供。 - これにより、反応的修復に依存せず、先を見越した全身制御を可能にする点が優位。

3. 技術・手法の肝は?

- 階層フレームワーク:言語生成と閉ループ制御の間にanticipatory joint-intent interfaceを学習。 - DAJI-Act:future-aware teacherをstudent-driven rolloutsで蒸留し、deployable diffusion action policyを獲得。 - DAJI-Flow:言語とintent historyからfuture intent chunksを自己回帰生成。 - これらにより、将来の接触変化や支持交換、バランス準備を明示的に符号化するjoint intentを生成。

4. どうやって有効だと検証した?

- anticipatory latent learning、単一指示生成、ストリーミング指示追従の実験で評価。 - HumanML3D-style generationで94.42%のrollout successを達成。 - BABELでsubsequence FID 0.152を記録。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の関連手法として、language-conditioned humanoid control、diffusion policy、hierarchical control、HumanML3D、BABELなどが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haozhe Jia, Honglei Jin, Yuan Zhang, Youcheng Fan, Shaofeng Liang, Lei Wang, Shuxu Jin, Kuimou Yu, Zinuo Zhang, Jianfei Song, Wenshuo Chen, Yutao Yue

分類: cs.RO, cs.CV

原文アブストラクト

Natural language is an intuitive interface for humanoid robots, yet streaming whole-body control requires control representations that are executable now and anticipatory of future physical transitions. Existing language-conditioned humanoid systems typically generate kinematic references that a low-level tracker must repair reactively, or use latent/action policies whose outputs do not explicitly encode upcoming contact changes, support transfers, and balance preparation. We propose \textbf{DAJI} (\emph{Dynamics-Aligned Joint Intent}), a hierarchical framework that learns an anticipatory joint-intent interface between language generation and closed-loop control. DAJI-Act distills a future-aware teacher into a deployable diffusion action policy through student-driven rollouts, while DAJI-Flow autoregressively generates future intent chunks from language and intent history. Experiments show that DAJI achieves strong results in anticipatory latent learning, single-instruction generation, and streaming instruction following, reaching 94.42\% rollout success on HumanML3D-style generation and 0.152 subsequence FID on BABEL.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI