位置・トルク制約下における水中マニピュレータの強化学習制御
A reinforcement learning control approach for underwater manipulation under position and torque constraints
水中マニピュレータの位置制御に対し、トルクと位置の制約を満たすアクター・クリティック型強化学習による低レベル制御器を提案し、シミュレーションで有効性を示した論文。
著者: Ignacio Carlucho, Mariano De Paula, Gerardo G. Acosta, Corina Barbalata
分類: cs.RO, cs.SY, eess.SY
原文アブストラクト
In marine operations underwater manipulators play a primordial role. However, due to uncertainties in the dynamic model and disturbances caused by the environment, low-level control methods require great capabilities to adapt to change. Furthermore, under position and torque constraints the requirements for the control system are greatly increased. Reinforcement learning is a data driven control technique that can learn complex control policies without the need of a model. The learning capabilities of these type of agents allow for great adaptability to changes in the operative conditions. In this article we present a novel reinforcement learning low-level controller for the position control of an underwater manipulator under torque and position constraints. The reinforcement learning agent is based on an actor-critic architecture using sensor readings as state information. Simulation results using the Reach Alpha 5 underwater manipulator show the advantages of the proposed control strategy.
関連論文
- 海中の身体知:マルチタスク水中マニピュレーションのための模倣学習水中マニピュレーション
- WasserMan: 水中マニピュレーション方策学習のためのベンチマーク水中マニピュレーション
- ULOHA: 水中両腕ロボット学習プラットフォーム水中マニピュレーション
- 水中ビークル・マニピュレータシステムの安全な衝突対処のための切替型非線形モデル予測制御戦略水中マニピュレーション
- 水中マニピュレーションのためのヒューリスティック運動記憶を用いた文脈認識行動学習水中マニピュレーション
- 水中マニピュレーションと海底介入タスクのためのVR拡張ロボットシミュレータ水中マニピュレーション
