日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.11396

PLUME: 多指操作のための確率的潜在統合世界モデリングとパラメータ推定

PLUME: Probabilistic Latent Unified World Modeling and Parameter Estimation for Multi-Finger Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

多指ロボットの操作タスクにおいて、物理パラメータの不確実性に対処するため、パラメータの信念とダイナミクスを同時に学習する世界モデルを提案し、シミュレーションから実機へのゼロショット転送を実現した。

詳しい要約

1. どんなもの?

- 多指ハンドによる器用な操作のための世界モデル - 物理パラメータ(物体形状、姿勢、摩擦係数)の不確実性に対処 - パラメータの信念とその条件付きダイナミクスを同時に学習 - 潜在空間で複数の物理パラメータと報酬を統合表現 - オンラインパラメータ推論により真のダイナミクスに効率的に適応 - シミュレーションと実機のネジ回し等で評価

2. 先行研究と比べてどこがすごい?

- 標準的なdomain randomizationでは不十分な精密タスクに対応 - パラメータ値に応じて操作戦略を変更可能 - オフライン強化学習や世界モデル拡張行動クローニングを上回る性能 - 再学習や微調整なしでオンライン推論により適応 - ゼロショット転移を実現

3. 技術・手法の肝は?

- パラメータの信念とシステムダイナミクスを同時に進化させる世界モデル - 潜在空間で複数の物理パラメータと報酬を統合表現 - 部分的に観測可能な変数の関数として報酬を学習 - オンラインパラメータ推論による効率的なアライメント - 計画に信念を活用

4. どうやって有効だと検証した?

- シミュレーションでscrewdriver turning, valve turning, bucket lifting, disk flickingを評価 - ハードウェアでscrewdriver turningを評価 - シミュレーション訓練方策のゼロショット転移に成功 - 最先端のオフライン強化学習と世界モデル拡張行動クローニングベースラインを上回る

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- オフライン強化学習(offline reinforcement learning) - 世界モデル拡張行動クローニング(world-model-augmented behavior cloning) - domain randomization

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Abhinav Kumar, Soshi Iba, Rana Soltani Zarrin, Dmitry Berenson

分類: cs.RO

原文アブストラクト

Dexterous manipulation with multi-finger hands can be sensitive to physical parameters such as object shape, pose, and friction coefficients. While simulation enables large-scale data collection with known parameter values, simulation-trained policies must still handle uncertainty at deployment, where the true parameters and therefore the true dynamics are unknown. Standard domain randomization strategies may be insufficient for precise tasks like screwdriver turning, as manipulation strategies may need to change depending on specific parameter values. To address this, we propose Probabilistic Latent Unified world Modeling and parameter Estimation (PLUME), a world model that jointly learns to evolve a belief over parameter values as well as the system dynamics conditioned on those parameters. We learn a latent space to jointly represent multiple qualitatively different physical parameters along with rewards, themselves functions of partially-observable variables, to inform planning. Our novel learning framework leads to efficient alignment of the world model to true dynamics through online parameter inference as opposed to re-training or fine-tuning. We evaluate our method on simulated screwdriver turning, valve turning, bucket lifting, and disk flicking tasks, as well as a hardware screwdriver turning task, where we achieve successful zero-shot transfer of our simulation-trained policy and outperform state-of-the-art offline reinforcement learning and world-model-augmented behavior cloning baselines. Please see our website at https://plume-world-model.github.io for videos.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI