日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

シミュレーション/デジタルツインarXiv:2603.12936

MotionAnymesh: 物理に基づく関節構造生成によるシミュレーション対応デジタルツイン

MotionAnymesh: Physics-Grounded Articulation for Simulation-Ready Digital Twins

シェア:XThreadsFacebookLINEはてブBluesky

静的な3Dメッシュを、物理シミュレーションで動作可能な関節付きアセットへ自動変換するフレームワークを提案。VLMの推論に物理的知識を組み込み、関節推定と衝突回避を最適化する。

詳しい要約

1. どんなもの?

- 静的な3Dメッシュを、embodied AIやロボティクスシミュレーションで利用可能な関節付きアセット(digital twin)へ自動変換するzero-shotフレームワーク。 - 物理的根拠を欠く既存手法の問題を解決し、kinematic hallucinationsやmesh inter-penetrationを防ぐ。 - 入力は非構造化静的メッシュ、出力はシミュレーション可能な関節構造。

2. 先行研究と比べてどこがすごい?

- 既存のzero-shotパイプラインは物理的根拠がなく、VLMによるkinematic hallucinationsや関節推定の制約不足によるmesh inter-penetrationが頻発。 - 提案手法はSP4D物理事前知識でVLM推論を接地し、kinematic hallucinationsを排除。 - さらにphysics-constrained trajectory optimizationにより衝突のない関節運動を保証し、幾何精度と動的物理実行可能性でSOTAを大幅に上回る。

3. 技術・手法の肝は?

- kinematic-aware part segmentationモジュール:VLM推論を明示的なSP4D物理事前知識で接地。 - geometry-physics joint estimationパイプライン:robust type-aware initializationとphysics-constrained trajectory optimizationを組み合わせ、衝突のない関節運動を厳密に保証。 - これらにより非構造化メッシュからシミュレーション可能なdigital twinを自動生成。

4. どうやって有効だと検証した?

- 広範な実験により、幾何精度と動的物理実行可能性の両面でstate-of-the-artベースラインを大幅に上回ることを示した。 - 下流アプリケーション向けに信頼性の高いアセットを提供できることを実証。 - 具体的なデータセットや評価指標は要旨からは不明。

5. 議論はある?

- 既存手法の物理的根拠の欠如が主要な課題であると指摘。 - 提案手法がkinematic hallucinationsとmesh inter-penetrationを解決することを強調。 - 限界や今後の課題、議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:ungrounded Vision-Language Models (VLMs)、zero-shot pipelines、state-of-the-art baselines。 - 関連手法:SP4D物理事前知識、physics-constrained trajectory optimization、kinematic-aware part segmentation。 - 同分野の定番:articulated object generation、digital twin for robotics simulation。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: WenBo Xu, Liu Liu, Li Zhang, Dan Guo, RuoNan Liu

分類: cs.RO, cs.CV

原文アブストラクト

Converting static 3D meshes into interactable articulated assets is crucial for embodied AI and robotic simulation. However, existing zero-shot pipelines struggle with complex assets due to a critical lack of physical grounding. Specifically, ungrounded Vision-Language Models (VLMs) frequently suffer from kinematic hallucinations, while unconstrained joint estimation inevitably leads to catastrophic mesh inter-penetration during physical simulation. To bridge this gap, we propose MotionAnymesh, an automated zero-shot framework that seamlessly transforms unstructured static meshes into simulation-ready digital twins. Our method features a kinematic-aware part segmentation module that grounds VLM reasoning with explicit SP4D physical priors, effectively eradicating kinematic hallucinations. Furthermore, we introduce a geometry-physics joint estimation pipeline that combines robust type-aware initialization with physics-constrained trajectory optimization to rigorously guarantee collision-free articulation. Extensive experiments demonstrate that MotionAnymesh significantly outperforms state-of-the-art baselines in both geometric precision and dynamic physical executability, providing highly reliable assets for downstream applications.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI