シミュレーションから実機への転移予算はどう使うべきか
How Should a Simulation-to-Reality Transfer Budget Be Spent?
実機計測時間をシステム同定とドメインランダム化のどちらに割り当てるべきかを、隠れパラメータを持つ振り子のシミュレーション環境で調査した論文。計測が転移ギャップの大部分を縮め、ランダム化の幅を広げるよりも推定パラメータでの学習が有効であることを示した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Syed Hamzah Rizvi, Yash Vardhan Tomar
分類: cs.RO, cs.LG
原文アブストラクト
Simulation-to-reality transfer, often called sim-to-real transfer, is a central challenge in robot learning. Yet, the tradeoff between measuring a system more accurately and training over a broader range of simulated dynamics is still poorly understood. In this work, we focused on the allocation of real-robot measurement time between system identification and domain randomization. We studied this tradeoff in a controlled sim-to-sim pendulum setting, where a hidden-parameter model stands in for the physical robot, and the experiment sweeps identification rollouts against the width of the randomization distribution. Across the reality gaps and noise levels we tested, the measurement budget did most of the work. A small number of identification rollouts closed most of the transfer gap, and once any real data was available, policies performed best when trained at the estimated parameters rather than over a widened randomization band. Broad randomization that contained the true system still did not substitute for measurement. These results hold in a benign regime where the dynamics are identifiable and only two parameters are unknown, so structural model mismatch remains the setting where randomization breadth may become more valuable. Overall, our results suggest that sim-to-real pipelines should first measure the parameters they can and reserve randomization for the uncertainty that remains.
関連論文
- TRR: ロボットシミュレーションとRGBTデータ生成のための熱相互作用エンジンsim2real
- ROS 2とNav2による部屋情報を介した物体目標ナビゲーションのsim-to-real展開sim2real
- DynLimit: 動特性が重要な計画・制御のためのシミュレーションベンチマークsim2real
- DAPPT: 手続き的軌道からドメイン認識方策を学習するシミュレーション・実機転移フレームワークsim2real
- 残差強化学習による視覚サーボ制御とゼロショットsim-to-real転移sim2real
- Ego2Sim2Humanoid: ロボット実演なしで移動操作VLAを学習するエージェント型実世界→シミュレーション変換sim2real
