日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2511.04249

コンテキストは現実ギャップを埋められるか?コンテキスト認識ポリシーのSim-to-Real転送

Can Context Bridge the Reality Gap? Sim-to-Real Transfer of Context-Aware Policies

シェア:XThreadsFacebookLINEはてブBluesky

シミュレーションから実機への転送において、動力学パラメータの推定値(コンテキスト)をポリシーに条件付けることで性能が向上するかを検証し、実機の押し操作タスクで有効性を示した。

詳しい要約

1. どんなもの?

- 本研究は、sim-to-real transferにおけるRLの課題に対し、policyをdynamics parametersの推定値(context)で条件付けするcontext-aware policyの有効性を検証するもの。 - Domain Randomization(DR)ベースのRLフレームワークにcontext estimation moduleを統合し、SOTAのsupervision strategiesを体系的に比較。 - 評価はcanonical control benchmarkとFranka Emika Panda robotによるreal-world pushing taskの両方で実施。

2. 先行研究と比べてどこがすごい?

- 標準的なDR手法は、ランダム化されたdynamicsの変動に対してagnosticなpolicyを訓練するのが一般的。 - 本研究は、dynamics parametersの推定値であるcontextをpolicyに条件付けすることで、DRによる性能低下を緩和できるかを検討する点が新しい。 - context-aware policyがcontext-agnostic baselineを全設定で上回ることを示した。

3. 技術・手法の肝は?

- DRベースのRLフレームワークにcontext estimation moduleを組み込む。 - policyをcontext(dynamics parametersの推定値)で条件付けるアーキテクチャを採用。 - SOTAのsupervision strategiesを体系的に比較し、context推定の学習方法を検討。 - 具体的なsupervision strategiesの名称や詳細は要旨からは不明。

4. どうやって有効だと検証した?

- canonical control benchmarkでの評価を実施。 - Franka Emika Panda robotを用いたreal-world pushing taskで評価。 - すべての設定においてcontext-aware policyがcontext-agnostic baselineを上回る結果を確認。 - 最良のsupervision strategyはタスクに依存することを示した。

5. 議論はある?

- context-aware policyは全設定でbaselineを上回るが、最良のsupervision strategyはタスク依存である点が議論の焦点。 - DRによる性能低下をcontext条件付けで緩和できる可能性を示唆。 - 各supervision strategyの優劣がタスク特性にどう依存するかの詳細な分析は要旨からは不明。

6. 次に読むべき論文は?

- Domain Randomization(DR)を用いたsim-to-real transferの代表的RL研究。 - context estimationやsystem identificationをRLに統合した先行手法(具体的名称は要旨からは不明)。 - Franka Emika Panda robotを用いたreal-world pushing taskに関するロボティクス研究。 - sim-to-real transfer全般のサーベイ論文。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Marco Iannotta, Yuxuan Yang, Johannes A. Stork, Erik Schaffernicht, Todor Stoyanov

分類: cs.RO

原文アブストラクト

Sim-to-real transfer remains a major challenge in reinforcement learning (RL) for robotics, as policies trained in simulation often fail to generalize to the real world due to discrepancies in environment dynamics. Domain Randomization (DR) mitigates this issue by exposing the policy to a wide range of randomized dynamics during training, yet leading to a reduction in performance. While standard approaches typically train policies agnostic to these variations, we investigate whether sim-to-real transfer can be improved by conditioning the policy on an estimate of the dynamics parameters -- referred to as context. To this end, we integrate a context estimation module into a DR-based RL framework and systematically compare SOTA supervision strategies. We evaluate the resulting context-aware policies in both a canonical control benchmark and a real-world pushing task using a Franka Emika Panda robot. Results show that context-aware policies outperform the context-agnostic baseline across all settings, although the best supervision strategy depends on the task.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI