日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

空中マニピュレーションarXiv:2606.16621

不確実性下の空中マニピュレーションのための内ループ動力学推定器を用いた強化学習

Reinforcement Learning with Inner-loop Dynamics Estimator for Aerial Manipulation under Uncertainty

シェア:XThreadsFacebookLINEはてブBluesky

空中マニピュレータの全身制御を強化学習と内ループ動力学推定器を組み合わせた階層制御で実現し、ペイロード変動下での追従精度と成功率を向上させた。

詳しい要約

1. どんなもの?

- 本論文は、Aerial Manipulation(空中マニピュレーション)における未知の動的不確かさに対処するための階層型制御フレームワークを提案する。 - 外側ループにReinforcement Learning (RL) を、内側ループにdynamics estimatorを組み合わせる。 - 対象は、3-DoFマニピュレータを搭載したカスタムquadrotor。 - ペイロード変化やアームの急速な動作下での直接的なwhole-body制御を目指す。

2. 先行研究と比べてどこがすごい?

- 従来のRL+PIDやRL+INDI+PIDベースラインと比較して、end-effectorの追従誤差を低減し、タスク成功率を向上させた。 - ポリシー層で完全に正確な結合動力学モデルに依存せず、タスク駆動型の直接制御を可能にした点が特徴。 - システムモデル知識を必要としないdynamics estimatorにより、過渡的な慣性変化や不確かさを補償する。

3. 技術・手法の肝は?

- 階層制御:外側のRLループが所望の6-DOF end-effector目標を協調的なwhole-bodyコマンドにマッピング。 - 内側ループがそのコマンドを追従し、実行中の過渡的慣性シフトや不確かさをdynamics estimatorスキームで補償。 - このestimatorはシステムモデル知識を必要としない。 - これにより、ポリシー層での完全な結合動力学モデルへの依存を回避。

4. どうやって有効だと検証した?

- 3-DoFマニピュレータを搭載したカスタムquadrotorを用いたハードウェア実験で検証。 - ペイロード条件を変化させて評価。 - RL+PIDおよびRL+INDI+PIDベースラインと比較し、end-effector追従誤差の低減とタスク成功率の向上を確認。

5. 議論はある?

- 学習されたwhole-body協調とestimatorベースの低レベル補償の組み合わせが、変化する動作条件下での空中マニピュレーションの精度とロバスト性を改善することを示す。 - 具体的な限界や失敗事例、計算コスト、リアルタイム性に関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較されているRL+PIDおよびRL+INDI+PIDのベースライン研究。 - INDI (Incremental Nonlinear Dynamic Inversion) に関する研究。 - Aerial ManipulationにおけるRLベースのwhole-body制御に関する研究。 - Dynamics estimatorを用いた外乱補償に関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shivansh Pratap Singh, Samaksh Ujjwal, Ishita Chaudhary, V R Vasudevan, Rishabh Dev Yadav, Spandan Roy

分類: cs.RO

原文アブストラクト

Aerial manipulators enable physical interaction in hard-to-reach environments; however, the combined problem of direct whole-body aerial manipulation under rapid arm motion, payload changes, and related unknown dynamic uncertainty remains a largely unsolved problem. We present a hierarchical control framework that combines Reinforcement Learning (RL) with an inner-loop dynamics estimator to address this problem. The RL outer loop maps desired 6-degrees-of-freedom (DOF) end-effector targets to coordinated whole-body commands, enabling direct task-driven control without relying on a fully accurate coupled dynamic model in the policy layer. An inner loop then tracks these commands while compensating for transient inertial shifts and uncertainty during execution via a dynamics estimator scheme without requiring system model knowledge. We validate the proposed approach on a custom quadrotor equipped with a 3-DoF manipulator through hardware experiments under varying payload conditions. Compared with RL+PID and RL+INDI+PID baselines, the proposed method reduces end-effector tracking error and improves task success rate across the tested hardware conditions. These results show that combining learned whole-body coordination with estimator-based low-level compensation improves the precision and robustness of aerial manipulation under changing operating conditions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI