日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2512.08188

身体性を持つ思考の木:身体性世界モデルによる意図的なマニピュレーション計画

Embodied Tree of Thoughts: Deliberate Manipulation Planning with Embodied World Model

シェア:XThreadsFacebookLINEはてブBluesky

物理ベースのデジタルツインを世界モデルとして用い、木探索とVLMによる失敗診断でロボットのマニピュレーション計画を立案するReal2Sim2Realフレームワークを提案。

詳しい要約

1. どんなもの?

- ロボットマニピュレーション計画のための新しい Real2Sim2Real フレームワーク「Embodied Tree of Thoughts (EToT)」 - 物理ベースのインタラクティブな digital twin を embodied world model として利用 - 計画を tree search として定式化し、実行前に将来状態を予測・推論 - 対象は short-horizon および long-horizon の manipulation タスク

2. 先行研究と比べてどこがすごい?

- 先行研究では video-generation models を world model として採用する傾向 - しかし物理的 grounding が弱く、hallucination や long-horizon の物理制約の一貫性維持に失敗 - EToT は physics simulator に高レベル推論を接地させることで、rigid-body dynamics と collision constraints に従う計画を保証 - 物理的整合性と長期的制約の維持を狙う点が差分

3. 技術・手法の肝は?

- 計画を tree search として展開し、2つの branching 機構を組み合わせ - Priori Branching: 意味的・空間的解析に基づき多様な候補実行パスを生成 - Reflective Branching: VLM を用いて simulator 内の実行失敗を診断し、修正行動で planning tree を反復的に改善 - physics-based interactive digital twin を embodied world model として使用 - Real2Sim2Real の枠組みで高レベル推論を物理シミュレータに接地

4. どうやって有効だと検証した?

- short-horizon および long-horizon の manipulation タスク群で評価 - 物理ダイナミクスの予測と潜在的な失敗への適応において、baselines を一貫して上回ると報告 - 具体的なタスク名・指標・baseline 名は要旨からは不明

5. 議論はある?

- video-generation models の物理的 grounding 不足と hallucination を動機として議論 - simulator への接地により rigid-body dynamics と collision constraints の遵守を主張 - 限界・失敗ケース・計算コスト・sim-to-real gap の詳細は要旨からは不明

6. 次に読むべき論文は?

- 比較対象として言及される video-generation models を用いた world model 研究 - VLM を用いた failure diagnosis / reflection に関する研究 - tree search に基づく manipulation planning(例: Monte Carlo Tree Search 系) - digital twin / Real2Sim2Real に関する研究 - 個別の論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenjiang Xu, Cindy Wang, Rui Fang, Mingkang Zhang, Lusong Li, Jing Xu, Jiayuan Gu, Zecui Zeng, Rui Chen

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

World models have emerged as a pivotal component in robot manipulation planning, enabling agents to predict future environmental states and reason about the consequences of actions before execution. While video-generation models are increasingly adopted, they often lack rigorous physical grounding, leading to hallucinations and a failure to maintain consistency in long-horizon physical constraints. To address these limitations, we propose Embodied Tree of Thoughts (EToT), a novel Real2Sim2Real planning framework that leverages a physics-based interactive digital twin as an embodied world model. EToT formulates manipulation planning as a tree search expanded through two synergistic mechanisms: (1) Priori Branching, which generates diverse candidate execution paths based on semantic and spatial analysis; and (2) Reflective Branching, which utilizes VLMs to diagnose execution failures within the simulator and iteratively refine the planning tree with corrective actions. By grounding high-level reasoning in a physics simulator, our framework ensures that generated plans adhere to rigid-body dynamics and collision constraints. We validate EToT on a suite of short- and long-horizon manipulation tasks, where it consistently outperforms baselines by effectively predicting physical dynamics and adapting to potential failures. Website at https://embodied-tree-of-thoughts.github.io .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI