日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2512.10099

強く押すより賢く押せ:効率的な非把持マニピュレーションのための階層型RL-拡散ポリシー

Push Smarter, Not Harder: Hierarchical RL-Diffusion Policy for Efficient Nonprehensile Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

物体を押して動かす非把持マニピュレーションを、高レベルRLによる目標選択と低レベル拡散モデルによる軌道生成の2段階に分けた階層型手法HeRDを提案し、成功率・経路効率・汎化性能で既存手法を上回った。

詳しい要約

1. どんなもの?

- 非把持マニピュレーション(nonprehensile manipulation)のうち、 clutter 環境で物体を押す(pushing)タスクを対象とした階層型制御手法 HeRD を提案。 - 高レベルと低レベルの2段階に分解:高レベルは強化学習(RL)エージェントが中間空間ゴールを選択し、低レベルはゴール条件付き拡散モデル(goal-conditioned diffusion model)が実行可能で効率的な軌道を生成。 - 2D シミュレーション環境で評価し、成功率・経路効率・複数環境構成への汎化で state-of-the-art ベースラインを上回る。 - コード・ドキュメント・学習済みモデルを GitHub で公開。

2. 先行研究と比べてどこがすごい?

- 従来の非把持マニピュレーションは複雑な接触ダイナミクスと長期的計画(long-horizon planning)が課題。 - 提案手法は RL の長期的報酬最大化行動と diffusion model の生成能力を組み合わせる点が新しい。 - 単一のポリシーではなく階層制御と生成的低レベル計画を統合することで、成功率・経路効率・汎化性能で state-of-the-art ベースラインを上回る。 - 具体的なベースライン名は要旨からは不明。

3. 技術・手法の肝は?

- タスクを高レベル目標選択と低レベル軌道生成に分解する階層構造。 - 高レベル:強化学習(RL)エージェントが中間空間ゴールを選択。 - 低レベル:ゴール条件付き diffusion model が、そのゴールに到達するための実行可能で効率的な軌道を生成。 - これにより RL の長期報酬最大化と diffusion model の生成能力を統合。

4. どうやって有効だと検証した?

- 2D シミュレーション環境で評価。 - 成功率、経路効率、複数の環境構成への汎化の3指標で state-of-the-art ベースラインと比較。 - すべての指標でベースラインを上回る結果を報告。 - 具体的な環境設定やベースライン名は要旨からは不明。

5. 議論はある?

- 結果から、階層制御と生成的低レベル計画の組み合わせが、スケーラブルで目標指向の非把持マニピュレーションに有望な方向性であると示唆。 - 限界や失敗事例、計算コスト、実機への転移可能性などの議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な先行研究やベースライン名は明記されていない。 - 関連手法として、非把持マニピュレーション、pushing、階層型強化学習(hierarchical RL)、diffusion policy、goal-conditioned diffusion model の文献を読むべき。 - 同分野の定番として、非把持マニピュレーションの古典的計画手法や、diffusion policy を用いたロボット操作の研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Steven Caro, Stephen L. Smith

分類: cs.RO, cs.LG

原文アブストラクト

Nonprehensile manipulation, such as pushing objects across cluttered environments, presents a challenging control problem due to complex contact dynamics and long-horizon planning requirements. In this work, we propose HeRD, a hierarchical reinforcement learning-diffusion policy that decomposes pushing tasks into two levels: high-level goal selection and low-level trajectory generation. We employ a high-level reinforcement learning (RL) agent to select intermediate spatial goals, and a low-level goal-conditioned diffusion model to generate feasible, efficient trajectories to reach them. This architecture combines the long-term reward maximizing behaviour of RL with the generative capabilities of diffusion models. We evaluate our method in a 2D simulation environment and show that it outperforms the state-of-the-art baseline in success rate, path efficiency, and generalization across multiple environment configurations. Our results suggest that hierarchical control with generative low-level planning is a promising direction for scalable, goal-directed nonprehensile manipulation. Code, documentation, and trained models are available: https://github.com/carosteven/HeRD.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI