日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2508.03129

MPC誘導外乱注入による安全志向模倣学習

Safety-Aware Imitation Learning via MPC-Guided Disturbance Injection

シェア:XThreadsFacebookLINEはてブBluesky

専門家のデモンストレーション中にMPCで最悪ケースの外乱を注入し、模倣方策に安全な回復行動を学習させる手法を提案。四足歩行やドローンの実験で安全性とタスク性能の向上を実証した。

詳しい要約

1. どんなもの?

- 提案手法は MPC-SafeGIL と呼ばれる design-time の imitation learning 安全性向上フレームワーク。 - expert demonstrations の収集時に adversarial disturbances を注入し、expert をより広範な safety-critical scenarios に晒す。 - これにより imitation policy が robust な recovery behaviors を学習できるようにする。 - 対象は高次元・black-box な dynamical systems を含むロボット制御。 - quadruped locomotion、visuomotor navigation、quadrotor 実機で検証。

2. 先行研究と比べてどこがすごい?

- 従来の安全性向上手法は analytical models や interactive experts に依存していた。 - MPC-SafeGIL は sampling-based Model Predictive Control (MPC) で worst-case disturbances を近似し、高次元・black-box 系にもスケール可能。 - safety 考慮を data collection 段階に直接組み込む点が先行研究と異なる。 - 学習後の修正ではなく design-time で安全性を強化するアプローチ。

3. 技術・手法の肝は?

- sampling-based MPC を用いて worst-case disturbances を近似する。 - その disturbance を expert demonstrations 収集時に注入する。 - expert は擾乱下での recovery 行動を含むデータを生成し、imitation policy がそれを学習。 - 解析モデル不要で black-box dynamical systems に適用可能。 - safety を data collection に統合する設計が肝。

4. どうやって有効だと検証した?

- 広範なシミュレーション実験を実施。 - quadruped locomotion と visuomotor navigation を含む。 - quadrotor による real-world experiments も実施。 - safety と task performance の両方で改善を確認。 - 詳細な定量結果は要旨からは不明。

5. 議論はある?

- 要旨からは明示的な議論・限界の記述は不明。 - design-time での擾乱注入が expert データ収集コストや分布シフトに与える影響は要旨からは不明。 - sampling-based MPC の計算コストやスケーラビリティの限界も要旨からは不明。 - 実機は quadrotor のみで、他タスクの実機展開は要旨からは不明。

6. 次に読むべき論文は?

- sampling-based Model Predictive Control (MPC) の関連研究。 - adversarial disturbance injection を用いる imitation learning の先行研究。 - interactive experts に基づく安全 imitation learning の研究。 - quadruped locomotion や visuomotor navigation の imitation learning 研究。 - 安全-critical ロボット学習の定番として safe reinforcement learning 関連。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Le Qiu, Yusuf Umut Ciftci, Somil Bansal

分類: cs.RO

原文アブストラクト

Imitation Learning has provided a promising approach to learning complex robot behaviors from expert demonstrations. However, learned policies can make errors that lead to safety violations, which limits their deployment in safety-critical applications. We propose MPC-SafeGIL, a design-time approach that enhances the safety of imitation learning by injecting adversarial disturbances during expert demonstrations. This exposes the expert to a broader range of safety-critical scenarios and allows the imitation policy to learn robust recovery behaviors. Our method uses sampling-based Model Predictive Control (MPC) to approximate worst-case disturbances, making it scalable to high-dimensional and black-box dynamical systems. In contrast to prior work that relies on analytical models or interactive experts, MPC-SafeGIL integrates safety considerations directly into data collection. We validate our approach through extensive simulations including quadruped locomotion and visuomotor navigation and real-world experiments on a quadrotor, demonstrating improvements in both safety and task performance. See our website here: https://leqiu2003.github.io/MPCSafeGIL/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI