接触を伴う操作タスクのためのデータ効率的なモデル学習と予測
Data-efficient Model Learning and Prediction for Contact-rich Manipulation Tasks
接触を伴う操作タスクにおいて、不連続なダイナミクスに対応するハイブリッド構造とガウス過程の不確実性表現を組み合わせ、少ないデータで順ダイナミクスモデルと長期予測を学習する手法を提案した。
著者: Shahbaz Abdul Khader, Hang Yin, Pietro Falco, Danica Kragic
分類: cs.RO
原文アブストラクト
In this letter, we investigate learning forward dynamics models and multi-step prediction of state variables (long-term prediction) for contact-rich manipulation. The problems are formulated in the context of model-based reinforcement learning (MBRL). We focus on two aspects-discontinuous dynamics and data-efficiency-both of which are important in the identified scope and pose significant challenges to State-of-the-Art methods. We contribute to closing this gap by proposing a method that explicitly adopts a specific hybrid structure for the model while leveraging the uncertainty representation and data-efficiency of Gaussian process. Our experiments on an illustrative moving block task and a 7-DOF robot demonstrate a clear advantage when compared to popular baselines in low data regimes.
関連論文
- テスト時モデルベース強化学習による世界モデルへの記憶の符号化モデルベース強化学習
- 再考:世界モデルにおける比較的想像を通じた探索と計画モデルベース強化学習
- アクションジェット:行動条件付きデータ多様体の局所形状の学習モデルベース強化学習
- 未モデル状態依存性下での学習クリティックによる最適制御モデルベース強化学習
- VIGOR: モデルベース強化学習における潜在空間一貫性によるゼロショット視覚汎化モデルベース強化学習
- 行動なし時系列からの動的埋め込みによる転移可能な方策学習モデルベース強化学習
