物理エンジンと情報理論によるモデル同定と方策探索:ロボットマニピュレーションへの応用
Information-theoretic Model Identification and Policy Search using Physics Engines with Application to Robotic Manipulation
物理エンジンを用いて物体の慣性・摩擦パラメータをベイズ最適化で同定し、同定モデルに基づく方策探索を同一枠組みで行うデータ効率の良い手法を提案。実機実験でモデルフリー強化学習を上回る性能を示した。
著者: Shaojun Zhu, Andrew Kimmel, Abdeslam Boularias
分類: cs.RO, cs.AI, cs.LG
原文アブストラクト
We consider the problem of a robot learning the mechanical properties of objects through physical interaction with the object, and introduce a practical, data-efficient approach for identifying the motion models of these objects. The proposed method utilizes a physics engine, where the robot seeks to identify the inertial and friction parameters of the object by simulating its motion under different values of the parameters and identifying those that result in a simulation which matches the observed real motions. The problem is solved in a Bayesian optimization framework. The same framework is used for both identifying the model of an object online and searching for a policy that would minimize a given cost function according to the identified model. Experimental results both in simulation and using a real robot indicate that the proposed method outperforms state-of-the-art model-free reinforcement learning approaches.
関連論文
- 経験時代における実世界コード・アズ・ポリシー:ACE-CaP-0マニピュレーション
- 把持のアドミタンスによる入出力特性評価:設計パラメータと把持挙動の接続マニピュレーション
- ManiLadder:カテゴリ別・多難易度タスクラダーによるロボットマニピュレーションのベンチマークマニピュレーション
- 成功確率を変える事象を記憶する:Criticゲート付きイベントメモリによる長期的マニピュレーションマニピュレーション
- BiPOP: 長期的な両腕ロボット操作のための部分順序計画マニピュレーション
- RUMI: 拡張現実と触覚フィードバックを備えたRobotiq対応の汎用マニピュレーションインターフェースマニピュレーション
