日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2506.01182

ヒューマノイド世界モデル:ヒューマノイドロボティクスのためのオープンワールド基盤モデル

Humanoid World Models: Open World Foundation Models for Humanoid Robotics

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドの制御トークンから未来の一人称視点映像を予測する軽量なオープンソース世界モデルを提案し、1〜2台のGPUで学習・運用可能にした。

詳しい要約

1. どんなもの?

- Humanoid World Models (HWM) という、humanoid ロボティクスのための軽量・オープンソースの世界モデル群を提案している。 - humanoid の control tokens を条件として、一人称視点 (egocentric) の将来動画を予測するモデルである。 - 生成モデルとして Masked Transformers と Flow-Matching の2種類を、100時間の humanoid デモンストレーションで学習している。 - 異なる attention 機構や parameter-sharing 戦略を持つアーキテクチャ変種も検討している。 - 学術・小規模ラボでの実用的な学習・配備 (1-2 GPUs) を想定した設計である。

2. 先行研究と比べてどこがすごい?

- 要旨からは、既存の world model 研究との具体的な比較は明示されていない。 - 主張されている特徴は、humanoid の control tokens に条件付けられた egocentric video 予測に特化している点である。 - 軽量・オープンソースで、1-2 GPUs という実用的な計算資源での学習・配備を狙う点を差別化として挙げている。 - parameter-sharing によりモデルサイズを 33-53% 削減しつつ、性能や視覚的忠実度への影響を最小限に抑えられることを示している。 - ただし、先行研究と比べた優位性の詳細は要旨からは不明である。

3. 技術・手法の肝は?

- humanoid の control tokens を条件入力として、将来の egocentric video を予測する条件付き生成モデルを構築している。 - 生成モデルとして Masked Transformers と Flow-Matching の2種類を採用している。 - 100時間の humanoid デモンストレーションを学習データとして用いている。 - attention 機構の違いや parameter-sharing 戦略の違いによるアーキテクチャ変種を検討している。 - parameter-sharing によりモデルサイズを 33-53% 削減する手法が肝の一つである。 - 1-2 GPUs で学習・配備できる軽量設計を志向している。

4. どうやって有効だと検証した?

- 100時間の humanoid デモンストレーションを用いて Masked Transformers と Flow-Matching を学習している。 - parameter-sharing 手法について、モデルサイズを 33-53% 削減しつつ、性能や視覚的忠実度への影響が最小限であることを確認している。 - attention 機構や parameter-sharing 戦略の異なるアーキテクチャ変種を比較検討している。 - 具体的な評価指標、ベンチマーク、定量結果の詳細は要旨からは不明である。

5. 議論はある?

- parameter-sharing によるモデルサイズ削減 (33-53%) と性能・視覚的忠実度のトレードオフが議論の中心と考えられる。 - attention 機構や parameter-sharing 戦略の違いが予測性能に与える影響を検討している。 - 1-2 GPUs という限られた計算資源での学習・配備可能性を実用性の観点から議論している。 - world model を long-horizon planning の dynamics model や policy learning 用の合成データ生成に活用する可能性に言及している。 - 具体的な限界や失敗事例、定量的な議論の詳細は要旨からは不明である。

6. 次に読むべき論文は?

- 要旨で直接参照・比較されている個別研究は明示されていない。 - 関連手法として、world model を用いた long-horizon planning や model-based RL の代表的枠組み (例: Dreamer 系) を挙げる。 - 条件付き動画生成の基盤として Masked Transformer 系や Flow-Matching 系の生成モデル研究を挙げる。 - humanoid の control tokens を用いたポリシー学習や模倣学習 (imitation learning) の関連研究を挙げる。 - egocentric video 予測や視覚に基づくロボットのダイナミクスモデルに関する研究を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Muhammad Qasim Ali, Aditya Sridhar, Shahbuland Matiana, Alex Wong, Mohammad Al-Sharman

分類: cs.RO, cs.AI

原文アブストラクト

Humanoid robots, with their human-like form, are uniquely suited for interacting in environments built for people. However, enabling humanoids to reason, plan, and act in complex open-world settings remains a challenge. World models, models that predict the future outcome of a given action, can support these capabilities by serving as a dynamics model in long-horizon planning and generating synthetic data for policy learning. We introduce Humanoid World Models (HWM), a family of lightweight, open-source models that forecast future egocentric video conditioned on humanoid control tokens. We train two types of generative models, Masked Transformers and Flow-Matching, on 100 hours of humanoid demonstrations. Additionally, we explore architectural variants with different attention mechanisms and parameter-sharing strategies. Our parameter-sharing techniques reduce model size by 33-53% with minimal impact on performance or visual fidelity. HWMs are designed to be trained and deployed in practical academic and small-lab settings, such as 1-2 GPUs.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI