相互依存タスクの自律的オープンエンド学習
Autonomous Open-Ended Learning of Interdependent Tasks
タスク選択をマルコフ決定過程として扱い、内的動機付けに基づくロボット制御アーキテクチャで、ヒューマノイドが相互依存する複数のリーチングタスクを自律的に学習できることを示した。
著者: Vieri Giuliano Santucci, Emilio Cartoni, Bruno Castro da Silva, Gianluca Baldassarre
分類: cs.AI, cs.RO
原文アブストラクト
Autonomy is fundamental for artificial agents acting in complex real-world scenarios. The acquisition of many different skills is pivotal to foster versatile autonomous behaviour and thus a main objective for robotics and machine learning. Intrinsic motivations have proven to properly generate a task-agnostic signal to drive the autonomous acquisition of multiple policies in settings requiring the learning of multiple tasks. However, in real world scenarios tasks may be interdependent so that some of them may constitute the precondition for learning other ones. Despite different strategies have been used to tackle the acquisition of interdependent/hierarchical tasks, fully autonomous open-ended learning in these scenarios is still an open question. Building on previous research within the framework of intrinsically-motivated open-ended learning, we propose an architecture for robot control that tackles this problem from the point of view of decision making, i.e. treating the selection of tasks as a Markov Decision Process where the system selects the policies to be trained in order to maximise its competence over all the tasks. The system is then tested with a humanoid robot solving interdependent multiple reaching tasks.
関連論文
- ロボットのオープンエンド学習課題に向けた動機付けアーキテクチャオープンエンド学習
- ユーザーの目的に焦点を当てたロボットのオープンエンド強化学習オープンエンド学習
- オープンエンド学習ロボットにおける自律性と整合性の問題:目的フレームワークの形式化オープンエンド学習
- 非定常な相互依存タスクの自律的オープンエンド学習オープンエンド学習
- REAL-X:真にエンドツーエンドな感覚運動自律学習を実現するロボットのオープンエンド学習アーキテクチャオープンエンド学習
