日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.26612

飛行外乱下におけるオーバーヘッドマニピュレータ搭載UAVのためのTransformerベース強化学習制御に対するメタ適応ビームサーチ計画

Meta-Adaptive Beam Search Planning for Transformer-Based Reinforcement Learning Control of UAVs with Overhead Manipulators under Flight Disturbances

シェア:XThreadsFacebookLINEはてブBluesky

ドローン搭載マニピュレータの制御にTransformerベースのDDQN強化学習と適応的ビームサーチ計画を組み合わせ、風などの外乱下でもエンドエフェクタの追従精度を高める手法を提案した。

詳しい要約

1. どんなもの?

- 対象: overhead manipulator を搭載した UAV の制御 - 課題: 機体とマニピュレータの運動が強く結合し、風や制御誤差による姿勢変化で end-effector が目標軌道からずれる - 提案: transformer-based DDQN に adaptive beam-search planner を組み合わせた RL フレームワーク - 目的: 外乱下でも end-effector の軌道追従を安定化

2. 先行研究と比べてどこがすごい?

- 固定ベースロボット向けの学習ベース arm controller は直接使えない - 提案手法は adaptive beam-search により end-effector の動きを予測 - 固定ビームや Transformer のみの変種より外乱下で安定 - DDQN baseline 比で reward 10.2% 増、追従誤差 6%→3%、複合指標 29.6% 改善

3. 技術・手法の肝は?

- transformer-based double deep Q learning (DDQN) をベース - adaptive beam-search planner が短ホライズンで候補制御列を探索 - 学習済み critic を forward estimator として使用 - 実機ではなく simulated rollouts で先読みする software-in-the-loop (SITL) アプローチ - Transformer critic が短い状態列から価値推定、DDQN が one-step target を提供

4. どうやって有効だと検証した?

- 3-DoF aerial manipulator で同一学習条件下で評価 - DDQN baseline、fixed-beam、Transformer-only 変種と比較 - 指標: reward、mean tracking error、combined reward-error metric - 外乱による機体ドリフト下で 5 cm の追従誤差を維持し安定性を確認

5. 議論はある?

- 機体とマニピュレータの結合や外乱による end-effector のずれが問題 - 提案手法は SITL で先読みし、実機実行前に制御列を評価 - 固定ビームや Transformer のみより安定 - 限界や今後の課題は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている DDQN baseline、fixed-beam、Transformer-only 変種 - 関連手法: transformer-based reinforcement learning、beam search planning、software-in-the-loop (SITL) - 同分野の定番: aerial manipulator control、UAV with overhead manipulator

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hazim Alzorgan, Sayed Pedram Haeri Boroujeni, Abolfazl Razi

分類: cs.RO

原文アブストラクト

Drones equipped with overhead manipulators offer unique capabilities for inspection, maintenance, and contact-based interaction. However, the motion of the drone and its manipulator is tightly linked, and even small attitude changes caused by wind or control imperfections shift the end-effector away from its intended path. This coupling makes reliable tracking difficult and also limits the direct use of learning-based arm controllers that were originally designed for fixed-base robots. These effects appear consistently in our tests whenever the UAV body experiences drift or rapid attitude corrections. To address this behavior, we develop a reinforcement-learning (RL) framework with a transformer-based double deep Q learning (DDQN), with the core idea of using an adaptive beam-search planner that applies a short-horizon beam search over candidate control sequences using the learned critic as the forward estimator. This allows the controller to anticipate the end-effector's motion through simulated rollouts rather than executing those actions directly on the actual model, realizing a software-in-the-loop (SITL) approach. The lookahead relies on value estimates from a Transformer critic that processes short sequences of states, while a DDQN backbone provides the one-step targets needed to keep the learning process stable. Evaluated on a 3-DoF aerial manipulator under identical training conditions, the proposed meta-adaptive planner shows the strongest overall performance with a 10.2% reward increase, a substantial reduction in mean tracking error (from about 6% to 3%), and a 29.6% improvement in the combined reward-error metric relative to the DDQN baseline. Our method exhibits elevated stability in tracking target tip trajectory (by maintaining 5 cm tracking error) when the drone base exhibits drifts due to external disturbances, as opposed to the fixed-beam and Transformer-only variants.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI