日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

安全制御/ゲーム理論arXiv:2510.18845

MADR: MPC誘導による敵対的DeepReach

MADR: MPC-guided Adversarial DeepReach

シェア:XThreadsFacebookLINEはてブBluesky

MPCを活用した自己教師あり学習で2人ゼロサム微分ゲームの価値関数を高次元でも高精度に近似し、ロボットの安全な最適戦略を導出するフレームワークを提案。

詳しい要約

1. どんなもの?

- 二プレイヤー・ゼロサム微分ゲームの値関数を頑健に近似する汎用フレームワーク MADR(MPC-guided Adversarial DeepReach)を提案する研究。 - Hamilton-Jacobi (HJ) Reachability に基づき、敵対的 disturbance 下での安全な value function と policy を生成する。 - ゼロサムゲームにおける両プレイヤーの最適戦略と、worst-case robustness のための安全 policy を同時に与える。 - 高次元の simulated および real robotic agents で検証。

2. 先行研究と比べてどこがすごい?

- HJ Reachability は次元の呪い(curse of dimensionality)に制限される。 - Physics-informed deep learning はこれを克服するが、PDE 勾配の弱さと自己教師あり学習の複雑さから収束が遅く不正確。 - 近年、最適制御問題の性質に基づく regular supervision で自己教師あり学習を強化すると収束と解品質が大幅に改善する手法があるが、single player 問題や単純なゲームに限られていた。 - 本研究はこれを二プレイヤー・ゼロサム微分ゲームへ一般化した点が新規。

3. 技術・手法の肝は?

- MPC-guided な regular supervision を self-supervision に組み合わせ、Adversarial DeepReach として二プレイヤー・ゼロサム微分ゲームの value function を近似。 - ゼロサムゲームの両プレイヤーの最適戦略を導出し、worst-case robustness の安全 policy を得る。 - 詳細なアルゴリズム構成や MPC の具体的統合方法は要旨からは不明。

4. どうやって有効だと検証した?

- 多様な dynamics とゲームを持つ多数の高次元 simulated agents で検証し、state-of-the-art baselines を大きく上回る性能を確認。 - real robotic agents の hardware 実験でも印象的な結果を得たと報告。 - 具体的なタスク・指標・比較手法の詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 想定される論点として、MPC-guided supervision の計算コスト、高次元スケーラビリティ、実機での robustness の一般性などが考えられるが、本文に基づかない推測は避ける。

6. 次に読むべき論文は?

- 要旨で参照される関連研究:Hamilton-Jacobi (HJ) Reachability、Physics-informed deep learning、DeepReach 系の self-supervised 手法、regular supervision を用いた最適制御問題の学習手法。 - 同分野の定番として MPC (Model Predictive Control) および differential game の古典的解法に関する文献。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ryan Teoh, Sander Tonkens, William Sharpless, Aijia Yang, Zeyuan Feng, Somil Bansal, Sylvia Herbert

分類: cs.RO, cs.SY, eess.SY

原文アブストラクト

Hamilton-Jacobi (HJ) Reachability offers a framework for generating safe value functions and policies in the face of adversarial disturbance, but is limited by the curse of dimensionality. Physics-informed deep learning is able to overcome this infeasibility, but itself suffers from slow and inaccurate convergence, primarily due to weak PDE gradients and the complexity of self-supervised learning. A few works, recently, have demonstrated that enriching the self-supervision process with regular supervision (based on the nature of the optimal control problem), greatly accelerates convergence and solution quality, however, these have been limited to single player problems and simple games. In this work, we introduce MADR: MPC-guided Adversarial DeepReach, a general framework to robustly approximate the two-player, zero-sum differential game value function. In doing so, MADR yields the corresponding optimal strategies for both players in zero-sum games as well as safe policies for worst-case robustness. We test MADR on a multitude of high-dimensional simulated and real robotic agents with varying dynamics and games, finding that our approach significantly out-performs state-of-the-art baselines in simulation and produces impressive results in hardware.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI