日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2606.00313

駆動不確実性下におけるダブルアッカーマンロボットのDRLベース姿勢制御

DRL-Based Pose Control for Double-Ackermann Robots Under Actuation Uncertainties

シェア:XThreadsFacebookLINEはてブBluesky

シミュレーションと実機の差による性能低下を、Gazeboの駆動特性をPyBullet訓練環境に取り込むsim-to-sim-to-real手法で克服し、ダブルアッカーマンロボットの姿勢制御成功率を向上させた。

詳しい要約

1. どんなもの?

- 対象: double-Ackermann-steering mobile robots の pose control - 目的: DRL 方策の sim-to-real 転移を actuation uncertainties 下で改善 - 手法: ManeuverNet を拡張し、sim-to-sim-to-real アプローチを採用 - 結果: Gazebo で最大 92% 成功率、実機転移も追加調整なしで成功

2. 先行研究と比べてどこがすごい?

- 先行: ManeuverNet は position control を目的としていた - 本研究: 目的を full pose control に拡張し、より困難なタスクを設定 - 先行: 簡易 actuation モデルでは sim-to-real ギャップが大きい - 本研究: Gazebo の actuation 効果を PyBullet 訓練に組み込み、ギャップを大幅に削減 - 成果: 成功率が PyBullet 100% から Gazebo 25% に低下する問題を、最大 92% まで改善

3. 技術・手法の肝は?

- 基盤: DRL フレームワーク ManeuverNet を拡張 - 目的変更: position control から full pose control へ - アプローチ: sim-to-sim-to-real を採用 - 訓練: Gazebo で観測した actuation 効果を PyBullet 訓練環境に組み込む - アルゴリズム: multi-environment DRL で SAC と CrossQ を使用 - 特徴: モデリング不正確さに対して頑健な方策を学習

4. どうやって有効だと検証した?

- シミュレータ: PyBullet と Gazebo で評価 - 条件: 厳しい評価条件下で成功率を比較 - 結果: 簡易モデルでは PyBullet 100% から Gazebo 25% に低下 - 提案手法: Gazebo で最大 92% 成功率、厳しい閾値下でも 69% を維持 - 実機: 追加調整なしで実ロボットへの転移に成功

5. 議論はある?

- 課題: 訓練時の簡易 actuation モデルが汎化性能を低下させる - 対策: Gazebo の actuation 効果を PyBullet に組み込むことで性能ギャップを削減 - 限界: 厳しい閾値下では成功率が 69% に低下 - 議論: シミュレータ間の差異や actuation 不確実性の影響が依然として存在 - 詳細: 要旨からは不明な点も多い

6. 次に読むべき論文は?

- 参照: ManeuverNet (DRL フレームワーク) - 比較: SAC と CrossQ (DRL アルゴリズム) - 関連: sim-to-sim-to-real 転移、double-Ackermann-steering robots の制御 - 同分野: 非ホロノミック移動ロボットの DRL 制御、actuation uncertainties 下の sim-to-real

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Oussama Zaim, Mélodie Daniel, Aly Magassouba, Miguel Aranda, Olivier Ly

分類: cs.RO, cs.AI

原文アブストラクト

Robust deployment of deep reinforcement learning (DRL) policies on real robots remains challenging due to discrepancies between simulation and real-world dynamics. We address this issue in the context of maneuvering with double-Ackermann-steering mobile robots, which introduce additional constraints due to their non-holonomic nature. Building upon the DRL framework ManeuverNet, we extend its objective from position control to full pose control, resulting in a more challenging task. We further investigate the impact of actuation-related uncertainties on policy transfer. The use of simplified actuation models during training of the extended policy can lead to poor generalization, shown by a success rate drop from 100% in PyBullet to 25% in Gazebo under stricter evaluation conditions. To address this limitation, we adopt a sim-to-sim-to-real approach, where actuation effects observed in Gazebo are incorporated into the PyBullet training environment. Using multi-environment DRL with SAC and CrossQ, we learn policies that remain robust despite modeling inaccuracies. This approach can significantly reduce the performance gap across simulators, achieving up to 92% success rate in Gazebo and maintaining 69% under stricter thresholds, with successful transfer to a real robot without additional tuning.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI