日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

スキル適応arXiv:2603.01480

ガウス過程を用いたロボットスキル学習と適応に向けて

Towards Robot Skill Learning and Adaptation with Gaussian Processes

シェア:XThreadsFacebookLINEはてブBluesky

ガウス過程に基づくスキル表現を用いて、軌道のキネマティクスを保ちつつ、初期状態と観測状態の差異に適応する3つの手法(最適化、行動クローニング、強化学習)を提案し、シミュレーションと実機で有効性を示した。

詳しい要約

1. どんなもの?

本論文は、Gaussian Process (GP) を用いたロボットスキル学習と適応のための新しいフレームワークを提案する。スキルを sparse via-points でコンパクトかつ表現力豊かにモデル化し、軌道の姿勢とその第1・第2解析的導関数を利用して運動学的プロファイルを保持する。初期配置と観測配置の変動に対応するため、3つの適応手法(最適化エージェント、行動クローニングエージェント、強化学習エージェント)を提示する。

2. 先行研究と比べてどこがすごい?

従来の学習ベーススキル適応は強化学習で微調整されるが、環境の小さな変化にしか対応できない表現力の限界があった。一方、GPベースのスキルモデリングは表現力と解析的特性を持つが、その適応は未探索であった。本論文はGPベーススキルの適応フレームワークを初めて提案し、大きな偏差にも対応可能なコンパクト表現を実現した点で先行研究より優れる。

3. 技術・手法の肝は?

技術の肝は、GPとsparse via-pointsによるコンパクトで表現力のあるスキルモデリング、および軌道の姿勢と第1・第2解析的導関数を活用した運動学的プロファイルの保持である。適応手法として、①via-pointsを調整しデモ速度を保持する最適化エージェント、②最適化エージェントの出力軌道を再現する行動クローニングエージェント、③運動学的プロファイルを維持しつつvia-pointsを変更しオンライン能力を可能にする強化学習エージェントを提案する。

4. どうやって有効だと検証した?

シミュレーションとハードウェアの両方で、drawer opening、cube-pushing、bar manipulationの3タスクを評価した。提案手法はすべてのベンチマークで成功率において上回った。さらに、GPベース表現により3手法すべてが高いコサイン類似度と低い速度大きさ誤差を達成し、運動学的プロファイルの強い保持を示した。

5. 議論はある?

本論文の議論は、GPベース表現が単一のデモンストレーションから大きな偏差に適応できるコンパクト表現を提供することを示している。ただし、具体的な限界や今後の課題については要旨からは不明である。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていないが、関連手法として強化学習によるスキル適応、Gaussian Processを用いたスキルモデリング、行動クローニング、最適化ベースの適応が挙げられる。同分野の定番として、模倣学習や強化学習によるロボットスキル獲得に関する研究が次に読むべき論文として考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: A K M Nadimul Haque, Fouad Sukkar, Sheila Sujipto, Cedric Le Gentil, Marc G. Carmichael, Teresa Vidal-Calleja

分類: cs.RO

原文アブストラクト

General robot skill adaptation requires expressive representations robust to varying task configurations. While recent learning-based skill adaptation methods refined via Reinforcement Learning (RL), have shown success, existing skill models often lack sufficient representational capacity for anything beyond minor environmental changes. In contrast, Gaussian Process (GP)-based skill modelling provides an expressive representation with useful analytical properties; however, adaptation of GP-based skills remains underexplored. This paper proposes a novel, robust skill adaptation framework that utilises GPs with sparse via-points for compact and expressive modelling. The model considers the trajectory's poses and leverages its first and second analytical derivatives to preserve the skill's kinematic profile. We present three adaptation methods to cater for the variability between initial and observed configurations. Firstly, an optimisation agent that adjusts the path's via-points while preserving the demonstration velocity. Second, a behaviour cloning agent trained to replicate output trajectories from the optimisation agent. Lastly, an RL agent that has learnt to modify via-points whilst maintaining the kinematic profile and enabling online capabilities. Evaluated across three tasks (drawer opening, cube-pushing and bar manipulation) in both simulation and hardware, our proposed methods outperform every benchmark in success rates. Furthermore, the results demonstrate that the GP-based representation enables all three methods to attain high cosine similarity and low velocity magnitude errors, indicating strong preservation of the kinematic profile. Overall, our formulation provides a compact representation capable of adapting to large deviations from a single demonstrated skill.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI