日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

物理シミュレーション/ニューラルワールドモデルarXiv:2605.09586

DeformMaster: ビデオから変形物体のための対話型物理ニューラルワールドモデル

DeformMaster: An Interactive Physics-Neural World Model for Deformable Objects from Videos

シェア:XThreadsFacebookLINEはてブBluesky

実ビデオから変形物体の物理ダイナミクスと外観を学習し、新しい操作や視点での未来予測とレンダリングを可能にする統一モデルを提案。

詳しい要約

1. どんなもの?

- DeformMasterは、実世界のインタラクション動画から変形可能物体のオンラインインタラクティブな物理-ニューラルワールドモデルを構築する手法。 - 変形可能物体の幾何・外観だけでなく、物理ダイナミクス、インタラクションの接地、材料挙動を統一的に学習。 - 実動画から物理状態を推論し、新しいインタラクション下で未来のダイナミクスをロールアウトし、高忠実度でレンダリング可能。

2. 先行研究と比べてどこがすごい?

- 従来のワールドモデルは幾何・外観のみ、または物理ダイナミクスを別々に扱うことが多かった。 - DeformMasterは、物理ロールアウトとニューラル残差を統合し、未モデル効果を補償。 - 手の動きを分散コンプライアントアクチュエータとして接地し、空間変化する構成則エキスパートで材料応答を表現。 - 最先端ベースラインを上回る性能を実現し、新規アクションロールアウト、材料パラメータ変動、動的新規視点合成をサポート。

3. 技術・手法の肝は?

- 統一的なダイナミクス・外観フレームワークを採用。 - 構造化された物理ロールアウトを保持しつつ、ニューラル残差で未モデル効果を補償。 - スパースな手の動きを分散コンプライアントアクチュエータとして接地し、手-連続体インタラクションをモデル化。 - 空間変化する構成則エキスパートで材料応答を表現。 - 予測された物理進化から高忠実度4D外観を駆動。

4. どうやって有効だと検証した?

- 実世界の変形可能物体シーケンスで実験。 - 未来のダイナミクスをロールアウトし、動的外観をレンダリングする能力を実証。 - 最先端ベースラインを上回る性能を示し、新規アクションロールアウト、材料パラメータ変動、動的新規視点合成をサポート。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。同分野の定番として、Neural Radiance Fields (NeRF)、Physics-Informed Neural Networks (PINN)、Material Point Method (MPM) などの関連手法が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Can Li, Zhoujian Li, Ren Li, Jie Gu, Lei Lei, Jingmin Chen, Lei Sun

分類: cs.CV, cs.RO

原文アブストラクト

World models for deformable objects should recover not only geometry and appearance, but also underlying physical dynamics, interaction grounding, and material behavior. Learning such a model from real videos is challenging because deformable linear, planar, and volumetric objects evolve under high-dimensional deformation, noisy interactions, and complex material response. The model must therefore infer a physical state from visual observations, roll it forward under new interactions, and render the resulting dynamics with high visual fidelity. We present DeformMaster, a video-derived interactive physics-neural world model that turns real interaction videos into an online interactive model of deformable objects within a unified dynamics-and-appearance framework. DeformMaster preserves structured physical rollout while using a neural residual to compensate for unmodeled effects, grounds sparse hand motion as distributed compliant actuator for hand-continuum interaction, represents material response with spatially varying constitutive experts, and drives high-fidelity 4D appearance from the predicted physical evolution. Experiments on real-world deformable-object sequences demonstrate DeformMaster's ability to roll out future dynamics and render dynamic appearance, outperforming state-of-the-art baselines while supporting novel action rollout, material-parameter variation, and dynamic novel-view synthesis. Project page: https://can-lee.github.io/deformmaster-web/

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI