日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.18336

ManiDreams: 不確実性を考慮したタスク特化型直観物理による堅牢な物体操作のためのオープンソースライブラリ

ManiDreams: An Open-Source Library for Robust Object Manipulation via Uncertainty-aware Task-specific Intuitive Physics

シェア:XThreadsFacebookLINEはてブBluesky

物体操作の堅牢性を高めるため、知覚・パラメータ・構造の不確実性を計画ループ内で表現・伝播・制約するモジュール式フレームワークManiDreamsを提案・公開した。

詳しい要約

1. どんなもの?

- ロボットマニピュレーション向けのオープンソースライブラリ - 名称は ManiDreams - intuitive physics モデル上で uncertainty-aware な manipulation planning を行う - モジュール型フレームワーク - 知覚・パラメータ・構造の3種の不確かさを明示的に扱う - 公開先は https://github.com/Rice-RobotPI-Lab/ManiDreams

2. 先行研究と比べてどこがすごい?

- 従来の dynamics models は予測誤差の最小化に注力 - 本研究は不確かさを planning loop 内で表現・伝播・制約する統合問題と位置づけ - 訓練中に不確かさを抑制するのではなく、計画時に扱う点が異なる - 再訓練なしで任意の base policy に頑健性を付加できる - RL baseline が大きく劣化する摂動下でも頑健な性能を維持

3. 技術・手法の肝は?

- 分布的な状態表現のための composable abstractions - backend-agnostic な dynamics prediction - 行動最適化のための宣言的制約指定 - 任意の base policy を sample-predict-constrain loop でラップ - 候補行動を分布的な結果に対して評価 - 知覚・パラメータ・構造の不確かさを明示的に扱う

4. どうやって有効だと検証した?

- ManiSkill タスクで実験 - 各種摂動下で RL baseline と比較 - ManiDreams は頑健な性能を維持、RL baseline は大きく劣化 - pushing, picking, catching の実行可能な例を提示 - 実世界展開の例も提示 - 異なる policies, optimizers, physics backends, executors への柔軟性を実証

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- ManiSkill - RL baseline - intuitive physics models - learned world models - simulators

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Gaotian Wang, Kejia Ren, Andrew S. Morgan, Kaiyu Hang

分類: cs.RO

原文アブストラクト

Dynamics models, whether simulators or learned world models, have long been central to robotic manipulation, but most focus on minimizing prediction error rather than confronting a more fundamental challenge: real-world manipulation is inherently uncertain. We argue that robust manipulation under uncertainty is fundamentally an integration problem: uncertainties must be represented, propagated, and constrained within the planning loop, not merely suppressed during training. We present and open-source ManiDreams, a modular framework for uncertainty-aware manipulation planning over intuitive physics models. It realizes this integration through composable abstractions for distributional state representation, backend-agnostic dynamics prediction, and declarative constraint specification for action optimization. The framework explicitly addresses three sources of uncertainty: perceptual, parametric, and structural. It wraps any base policy with a sample-predict-constrain loop that evaluates candidate actions against distributional outcomes, adding robustness without retraining. Experiments on ManiSkill tasks show that ManiDreams maintains robust performance under various perturbations where the RL baseline degrades significantly. Runnable examples on pushing, picking, catching, and real-world deployment demonstrate flexibility across different policies, optimizers, physics backends, and executors. The framework is publicly available at https://github.com/Rice-RobotPI-Lab/ManiDreams

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI