日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2601.15419

異なる身体を持つロボット制御のための統一潜在空間の学習

Learning a Unified Latent Space for Cross-Embodiment Robot Control

シェア:XThreadsFacebookLINEはてブBluesky

人間と多様なヒューマノイドロボットの運動を統一する共有潜在空間を学習し、人間のデータのみで訓練した目標条件付き制御方策を複数のロボットに適応なしで展開できるフレームワークを提案した。

詳しい要約

1. どんなもの?

- 人間と多様な humanoid ロボット(single-arm, dual-arm, legged)の運動を統合する共有 latent space を学習する cross-embodiment 制御フレームワーク。 - 2段階:①身体部位ごとの局所運動を contrastive learning で捉える decoupled latent space を構築し、多様な形態間で motion retargeting を可能にする。②人間データのみで latent space 内に goal-conditioned control policy を訓練する。 - 訓練済み policy は適応なしで複数ロボットに直接展開でき、新ロボット追加も軽量な robot-specific embedding layer の学習のみで対応する。

2. 先行研究と比べてどこがすごい?

- 従来の cross-embodiment 制御は形態ごとの再学習や大量のロボットデータを要することが多いが、本手法は人間データのみで policy を訓練し、複数ロボットにゼロ適応で展開できる点が異なる。 - 身体部位ごとに分離した latent space と、関節回転と end-effector 位置を組み合わせた類似度指標により、多様な形態間の正確で柔軟な motion retargeting を実現。 - 新ロボット追加時に軽量な embedding layer のみを学習すればよく、スケーラビリティが高い。

3. 技術・手法の肝は?

- 第1段階:contrastive learning により身体部位ごとの局所運動パターンを捉える decoupled latent space を構築。 - 形態間の alignment を高めるため、腕などの重要セグメントで joint rotation と end-effector positioning を組み合わせた tailored similarity metrics を導入。 - 第2段階:conditional variational autoencoder を用い、意図した goal direction に導かれる latent space displacement を予測する goal-conditioned control policy を人間データのみで訓練。 - 新ロボットには軽量な robot-specific embedding layer を学習するだけで latent space に追加でき、学習済み latent policy を直接適用可能。

4. どうやって有効だと検証した?

- 複数の humanoid プラットフォーム(single-arm, dual-arm, legged)に対する実験で、robust, scalable, embodiment-agnostic な制御が可能であることを示した。 - 訓練済み policy が適応なしで複数ロボットに直接展開できること、新ロボット追加が軽量 embedding layer の学習のみで可能であることを実験的に確認。 - 具体的な評価指標やタスクの詳細は要旨からは不明。

5. 議論はある?

- 本手法は人間データのみで訓練した latent policy を多様なロボットにゼロ適応で展開でき、新ロボット追加も軽量である点を主張。 - ただし、失敗ケースや限界、計算コスト、実機での安全性などに関する議論は要旨からは不明。 - 類似度指標の設計が性能に与える影響や、legged humanoid のバランス制御への対応範囲も要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明記されていない。 - 関連手法として、cross-embodiment learning、motion retargeting、contrastive learning、conditional variational autoencoder、goal-conditioned policy の代表的論文を挙げる。 - 同分野の定番として、human-to-robot motion retargeting や embodiment-agnostic control に関する研究を読むとよい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yashuai Yan, Dongheui Lee

分類: cs.RO

原文アブストラクト

We present a scalable framework for cross-embodiment humanoid robot control by learning a shared latent representation that unifies motion across humans and diverse humanoid platforms, including single-arm, dual-arm, and legged humanoid robots. Our method proceeds in two stages: first, we construct a decoupled latent space that captures localized motion patterns across different body parts using contrastive learning, enabling accurate and flexible motion retargeting even across robots with diverse morphologies. To enhance alignment between embodiments, we introduce tailored similarity metrics that combine joint rotation and end-effector positioning for critical segments, such as arms. Then, we train a goal-conditioned control policy directly within this latent space using only human data. Leveraging a conditional variational autoencoder, our policy learns to predict latent space displacements guided by intended goal directions. We show that the trained policy can be directly deployed on multiple robots without any adaptation. Furthermore, our method supports the efficient addition of new robots to the latent space by learning only a lightweight, robot-specific embedding layer. The learned latent policies can also be directly applied to the new robots. Experimental results demonstrate that our approach enables robust, scalable, and embodiment-agnostic robot control across a wide range of humanoid platforms.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI