日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

変形物体操作arXiv:2603.18246

変形物体の移動操作のための粒子動力学の迅速適応

Rapid Adaptation of Particle Dynamics for Generalized Deformable Object Mobile Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

変形物体の未知の動力学を扱うため、シミュレーションで物体の粒子位置などの特権情報から動力学埋め込みを学習し、実ロボットで推論する二段階手法RAPiDを提案した。

詳しい要約

1. どんなもの?

- 未知のダイナミクスを持つ変形可能物体の操作を学習する課題に取り組む。 - 非剛体物体のダイナミクスパラメータは、伸縮・曲げ・圧縮・移動の反応を定義し、操作タスク成功のための最適行動決定に重要。 - 剛体物体操作や脚式移動ではRapid Motor Adaptation (RMA)が未知ダイナミクスに対処可能。 - 変形物体では形状変化もダイナミクスに含まれるため、RMAを拡張する必要がある。 - シミュレーションにおける最近のground-truth particle positionsが形状変化を捉えるという洞察に基づき、RAPiDを開発。 - RAPiDは2段階手法:1) シミュレーションで物体の特権情報(質量やground-truth particle positions)からダイナミクス埋め込みを符号化し、それに条件付けられたvisuomotor policyを学習。2) 非特権情報(ロボットの視覚観測と行動)から埋め込みを推論することを学習し、実世界に転移。 - 22自由度のモバイルマニピュレータで、実世界の2つの視覚ベース変形物体モバイル操作タスクにおいて、様々な物体ダ…

2. 先行研究と比べてどこがすごい?

- 従来のRMAは剛体物体や脚式移動に適用され、質量や位置などのダイナミクスを扱うが、変形物体の形状変化は考慮されていない。 - RAPiDはground-truth particle positionsを活用して形状変化を捉え、RMAを変形物体操作に拡張。 - これにより、未知のダイナミクスを持つ変形物体の実世界操作を可能にし、従来手法では困難だったタスクで高い成功率を実現。

3. 技術・手法の肝は?

- 2段階学習: - 第1段階:シミュレーションで物体の特権情報(質量、ground-truth particle positions)からダイナミクス埋め込みを符号化し、visuomotor policyを学習。 - 第2段階:非特権情報(視覚観測、行動)から埋め込みを推論するモデルを学習し、実世界に転移。 - 鍵となる洞察:ground-truth particle positionsが形状変化を捉えるため、変形物体のダイナミクス埋め込みに利用可能。 - これにより、実世界での未知ダイナミクスに対する適応を実現。

4. どうやって有効だと検証した?

- 22自由度のモバイルマニピュレータを使用。 - 実世界で2つの視覚ベース変形物体モバイル操作タスクを実施。 - 様々な物体ダイナミクス、カテゴリ、インスタンス下で評価。 - 結果:80%以上の成功率を達成。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- Rapid Motor Adaptation (RMA) - 変形物体操作に関する研究(具体的な論文名は要旨に記載なし) - 視覚ベースのロボット操作に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Bohan Wu, Roberto Martín-Martín, Li Fei-Fei

分類: cs.RO

原文アブストラクト

We address the challenge of learning to manipulate deformable objects with unknown dynamics. In non-rigid objects, the dynamics parameters define how they react to interactions -- how they stretch, bend, compress, and move -- and they are critical to determining the optimal actions to perform a manipulation task successfully. In other robotic domains, such as legged locomotion and in-hand rigid object manipulation, state-of-the-art approaches can handle unknown dynamics using Rapid Motor Adaptation (RMA). Through a supervised procedure in simulation that encodes each rigid object's dynamics, such as mass and position, these approaches learn a policy that conditions actions on a vector of latent dynamic parameters inferred from sequences of state-actions. However, in deformable object manipulation, the object's dynamics not only includes its mass and position, but also how the shape of the object changes. Our key insight is that the recent ground-truth particle positions of a deformable object in simulation capture changes in the object's shape, making it possible to extend RMA to deformable object manipulation. This key insight allows us to develop RAPiD, a two-phase method that learns to perform real-robot deformable object mobile manipulation by: 1) learning a visuomotor policy conditioned on the object's dynamics embedding, which is encoded from the object's privileged information in simulation, such as its mass and ground-truth particle positions, and 2) learning to infer this embedding using non-privileged information instead, such as robot visual observations and actions, so that the learned policy can transfer to the real world. On a mobile manipulator with 22 degrees of freedom, RAPiD enables over 80%+ success rates across two vision-based deformable object mobile manipulation tasks in the real world, under various object dynamics, categories, and instances.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI