日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2606.30268

接触中心の実世界-シミュレーション-実世界学習:単一デモからの学習

ConCent: Contact-Centric Real-to-Sim-to-Real Learning from One Demonstration

シェア:XThreadsFacebookLINEはてブBluesky

実世界のデモから抽出した接触イベント列を報酬信号として用いることで、シミュレーションから実世界へのポリシー転移を接触中心の忠実度で改善する手法を提案した論文。

詳しい要約

1. どんなもの?

- 実世界の1回のデモンストレーションから、接触中心のreal-to-sim-to-real強化学習フレームワークを提案。 - 接触イベント列(いつ、どこで、どのように接触が起こるか)と局所接触ダイナミクスを再現することを目的とする。 - シミュレーション内で物体をプリミティブの集合として近似し、接触幾何を最適化する。 - 接触イベント列を構造化報酬として用い、接触リッチな操作タスクにおけるsim-to-real転移を安定化・堅牢化する。

2. 先行研究と比べてどこがすごい?

- 従来のsim-to-real転移は接触ダイナミクスの不一致により接触リッチタスクで失敗しやすかった。 - 提案手法は接触中心の忠実性(接触イベント列と局所接触ダイナミクスの再現)を学習目的に組み込む点が新しい。 - タスクごとの報酬設計を必要とせず、デモから自動的に報酬信号を抽出するため、人手を削減できる。 - 制約なしRLベースラインと比較して、より安定で堅牢なsim-to-real転移を実現。

3. 技術・手法の肝は?

- 実デモからタスク関連の接触イベント列を自動抽出(デモをリプレイして取得)。 - 物体をプリミティブのグループとして近似し、シミュレーション内で接触幾何を最適化。 - 最適化により、観測された状態遷移を説明する局所接触ダイナミクスを再現。 - 接触イベント列を構造化報酬信号として強化学習を誘導し、非現実的なシミュレータ接触の悪用を防ぐ。 - 報酬設計は不要で、信号は自動的に得られる。

4. どうやって有効だと検証した?

- 接触リッチな操作タスクにおいて実験を実施。 - 制約なしRLベースラインと比較し、より安定で堅牢なsim-to-realポリシー転移を示した。 - 具体的なタスク名や評価指標は要旨からは不明。

5. 議論はある?

- 接触中心の忠実性がタスク成功の必要条件であると主張。 - 接触イベント列と局所接触ダイナミクスの再現が重要。 - 制約なしRLベースラインとの比較で有効性を示すが、限界や失敗ケース、計算コスト、スケーラビリティに関する議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、sim-to-real転移、ドメインランダム化、接触リッチ操作の強化学習、real-to-sim-to-real学習に関する論文が次に読むべき候補。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Heecheol Kim, Namiko Saito, Katsushi Ikeuchi, Yasuyuki Matsushita

分類: cs.RO

原文アブストラクト

Sim-to-real policy transfer -- deploying policies trained in simulation in the real world -- is a promising paradigm for scaling robot manipulation without large-scale real-world data. However, transferring simulation-trained policies remains challenging due to discrepancies in contact dynamics -- particularly in contact-rich tasks where subtle differences can alter task outcomes entirely. Because interaction between the manipulated object and the environment is mediated through contact, task success depends on accurately reproducing task-relevant contacts. Accordingly, in manipulation, contact-centric fidelity -- reproducing both the contact event sequence (when, where, and how contacts occur) and the local contact dynamics (how forces and motions evolve at each contact) -- is a necessary condition for task success. Based on this insight, we propose a contact-centric real-to-sim-to-real RL framework that uses task-relevant contact event sequences extracted from real demonstrations as the learning objective. We approximate objects as groups of primitives and optimize their contact geometry in simulation so that the resulting local contact dynamics explain the observed state transitions. The contact event sequence is automatically extracted by replaying the demonstration. This sequence serves as a structured reward signal, guiding the policy toward physically plausible contact regimes validated in reality and preventing exploitation of unrealistic simulator contacts. The signal is obtained automatically, requiring no per-task reward design. Experiments on contact-rich manipulation tasks demonstrate more stable and robust sim-to-real policy transfer compared to unconstrained RL baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI