日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2510.09036

RoDyn: ロボット操作のための対話型ロボット・ダイナミック2.5D世界モデルの構築

RoDyn: Taming Interactive Robot-Dynamic 2.5D World Model for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作のための幾何学的・運動学的推論を組み込んだ2.5D世界モデルを提案し、実世界模倣学習の成功率を42%向上させた。

詳しい要約

1. どんなもの?

- RoDynはロボットマニピュレーション向けの新しい2.5D世界モデル(World Model)。 - 環境のダイナミクスを効率的でgeometry-awareなlatent space上で定式化する。 - 2Dビデオベースの世界モデルが持つ空間・運動学的推論の欠如を補うことを狙う。 - neural simulatorとしてロボット操作に活用することを目的とする。

2. 先行研究と比べてどこがすごい?

- 従来の2D video-basedモデルは物理的相互作用に不可欠なspatial/kinematic reasoningを欠く。 - RoDynは2.5D表現でgeometry-awareなlatent spaceを導入し、この限界に対処。 - 大規模データセットでSOTAの生成忠実度を達成。 - 純粋な2Dベースラインに対し、実世界imitation learningの成功率を42%改善。 - model-based reinforcement learningも加速。

3. 技術・手法の肝は?

- Robot-Dynamic Tokenizerを提案。 - RGB-dominated cross-attention機構により、semantic visual appearanceとspatial/agent-centric priorを明示的に結合。 - dynamic mask guidanceを利用。 - Mask-guided Autoregressive architectureを採用し、mask priorをsequence transitionに直接注入。 - これによりロボットと物体のactive interaction領域にモデルの注意を集中させる。

4. どうやって有効だと検証した?

- 大規模データセットでの広範な実験を実施。 - 生成忠実度(generation fidelity)でSOTAを達成。 - 下流タスクへの効果を検証:model-based reinforcement learningの加速を確認。 - 実世界imitation learningで純粋な2Dベースライン比42%の成功率改善を達成。

5. 議論はある?

- 要旨からは不明(具体的な限界や失敗ケース、計算コスト、汎化性に関する議論は記述されていない)。

6. 次に読むべき論文は?

- 比較対象として示唆される2D video-based world models(純粋な2Dベースライン)。 - model-based reinforcement learningおよびimitation learningの関連研究。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chuanrui Zhang, Zhengxian Wu, Guanxing Lu, Yansong Tang, Ziwei Wang

分類: cs.RO

原文アブストラクト

Learned world models hold significant potential as neural simulators for robotic manipulation. However, prevalent 2D video-based models inherently lack the spatial and kinematic reasoning crucial for physical interactions. We introduce RoDyn, a novel Robot-Dynamic 2.5D World Model that formulates environmental dynamics within a highly efficient, geometry-aware latent space. Through the proposed Robot-Dynamic Tokenizer, we explicitly couple semantic visual appearances with spatial and agent-centric priors via an RGB-dominated cross-attention mechanism and dynamic mask guidance. Furthermore, by injecting these mask priors directly into sequence transitions, our Mask-guided Autoregressive architecture drives the model to focus on active robot-object interaction regions. Extensive experiments demonstrate that RoDyn establishes SOTA generation fidelity across large-scale datasets. Crucially, it translates these predictive capabilities into substantial downstream gains, accelerating model-based reinforcement learning and achieving a 42\% improvement in real-world imitation learning success rates over pure 2D baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI