強化学習を用いたオーバーヘッドマニピュレータ搭載UAVのアクチュエータ軌道計画
Actuator Trajectory Planning for UAVs with Overhead Manipulator using Reinforcement Learning
2自由度アームを搭載したドローンで、Q学習により障害物を回避しつつアーム先端の軌道を計画・制御する手法を提案し、平均変位誤差で92%の精度を達成した。
著者: Hazim Alzorgan, Abolfazl Razi, Ata Jahangir Moshayedi
分類: cs.RO, cs.LG
原文アブストラクト
In this paper, we investigate the operation of an aerial manipulator system, namely an Unmanned Aerial Vehicle (UAV) equipped with a controllable arm with two degrees of freedom to carry out actuation tasks on the fly. Our solution is based on employing a Q-learning method to control the trajectory of the tip of the arm, also called end-effector. More specifically, we develop a motion planning model based on Time To Collision (TTC), which enables a quadrotor UAV to navigate around obstacles while ensuring the manipulator's reachability. Additionally, we utilize a model-based Q-learning model to independently track and control the desired trajectory of the manipulator's end-effector, given an arbitrary baseline trajectory for the UAV platform. Such a combination enables a variety of actuation tasks such as high-altitude welding, structural monitoring and repair, battery replacement, gutter cleaning, skyscrapper cleaning, and power line maintenance in hard-to-reach and risky environments while retaining compatibility with flight control firmware. Our RL-based control mechanism results in a robust control strategy that can handle uncertainties in the motion of the UAV, offering promising performance. Specifically, our method achieves 92% accuracy in terms of average displacement error (i.e. the mean distance between the target and obtained trajectory points) using Q-learning with 15,000 episodes
関連論文
- CAPTURER:多様な環境で動的かつ精密な把持を実現する器用な空中マニピュレータ空中マニピュレーション
- 空中マニピュレータの非線形制御空中マニピュレーション
- LLM支援による能動的タスク生成を用いた適応型空中移動マニピュレーションポリシー学習空中マニピュレーション
- 異種環境を横断する対話型空中移動のベンチマーク空中マニピュレーション
- コード飛行:能動的な視覚・物理フィードバックによる空中マニピュレーションのための身体性コーディングエージェント空中マニピュレーション
- HexaGripper: 単一アクチュエータ・ウインチ展開型グリッパによる自律空中荷物回収空中マニピュレーション
