日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2601.10930

どこを触り、どう接触するか:幾何認識型sim-to-realマニピュレーションのための階層型RL-MPCフレームワーク

Where to Touch, How to Contact: A Hierarchical RL-MPC Framework for Geometry-Aware Sim-to-Real Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

接触を伴う巧みな操作を「どこを触るか(幾何)」と「どう動かすか(接触力学)」に階層化し、高レベルRLが接触意図を予測、低レベル接触陰的MPCが接触モードを最適化する枠組みを提案。多様な形状の押し操作や回転・反転、環境支援型の再配置で、少ないデータ(エンドツーエンド比1/10)で高成功率とゼロショットsim-to-real転移を実現した。

詳しい要約

1. どんなもの?

- 接触を伴うdexterous manipulationのための階層型RL-MPCフレームワーク。 - 高レベルRLがcontact intention(物体表面の接触位置と接触後の物体subgoal pose)を予測。 - 低レベルcontact-implicit MPCが接触モードを最適化し、リアルタイムに再計画してロボット動作を生成。 - non-prehensileタスク(形状一般化pushing、pivoting/flippingによるreorientation、環境支援repositioning)で評価。

2. 先行研究と比べてどこがすごい?

- end-to-endポリシーは大規模データを要しsim-to-real転移が乏しい。 - 提案法は10倍少ないデータで高い成功率を達成。 - 高いロバスト性とzero-shot sim-to-real転移を実現。 - 階層的推論によりglobal geometryとnonsmooth contact dynamicsを分離して扱う点が新しい。

3. 技術・手法の肝は?

- 高レベルRLポリシーがcontact intentionを予測。 - contact intentionは物体中心インターフェースで、接触位置とsubgoal poseを指定。 - 低レベルcontact-implicit MPCが接触モードを最適化し、接触ダイナミクスを通じてリアルタイムに再計画。 - これによりロボット動作を生成し、物体を各subgoalへロバストに移動。

4. どうやって有効だと検証した?

- non-prehensileタスクで評価:形状一般化pushing、pivoting/flippingによるreorientation、環境支援repositioning。 - 高い成功率、10倍少ないデータ、高いロバスト性、zero-shot sim-to-real転移を確認。 - 具体的な実験設定やベースラインの詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗ケース、計算コスト、MPCのリアルタイム性に関する議論は明記されていない。

6. 次に読むべき論文は?

- end-to-endベースライン(具体的名称は要旨からは不明)。 - contact-implicit MPCに関する研究。 - 階層型RLとMPCを組み合わせたmanipulation研究。 - non-prehensile manipulationやsim-to-real転移の関連研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhixian Xie, Yu Xiang, Michael Posa, Wanxin Jin

分類: cs.RO

原文アブストラクト

A key challenge in contact-rich dexterous manipulation is the need to jointly reason over global geometry and nonsmooth contact dynamics. End-to-end policies bypass this complexity, but often require large amounts of data and transfer poorly from simulation to reality. We address the limitations with a simple insight: dexterous manipulation is inherently hierarchical--at a high level, a robot decides where to touch (geometry); at a low level it determines how to move the object through contact dynamics. Building on this insight, we propose a hierarchical RL--MPC framework in which a high-level reinforcement learning (RL) policy predicts a contact intention, a novel object-centric interface that specifies (i) an object-surface contact location and (ii) a post-contact object subgoal pose. Conditioned on the contact intention, a low-level contact-implicit model predictive control (MPC) optimizes local contact modes and real-time (re)plans through contact dynamics to generate robot actions that robustly move the object toward each subgoal. We evaluate the framework on non-prehensile tasks, including geometry-generalized pushing across diverse object shapes, pivoting/flipping-based object reorientation, and environment-assisted object repositioning. It achieves high success rate with substantially reduced data (10 times less than end-to-end baselines), highly robust performance, and zero-shot sim-to-real transfer.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI