日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

sim2realarXiv:2604.02911

Dreamerによるタスク不変特性の学習:四足ロボットの効率的なポリシー転移を実現

Learning Task-Invariant Properties via Dreamer: Enabling Efficient Policy Transfer for Quadruped Robots

シェア:XThreadsFacebookLINEはてブBluesky

シミュレーションから実世界への転移を改善するため、Dreamer世界モデルにタスク不変特性の学習を組み込んだフレームワークDreamTIPを提案し、四足ロボットの複雑な地形での性能を大幅に向上させた。

詳しい要約

1. どんなもの?

- 四足歩行ロボットの多様な地形における移動を実現するためのDreamTIPフレームワークを提案。 - Dreamer world modelにTask-Invariant Properties学習を組み込み、sim-to-real転送能力を向上。 - 大規模言語モデルをガイドとして、接触安定性や地形クリアランスなどのタスク不変特性を特定・活用。 - これらの特性を補助予測ターゲットとしてworld modelに統合し、動的変化に鈍感な表現を学習。 - 混合リプレイバッファと正則化制約による効率的適応戦略を設計。

2. 先行研究と比べてどこがすごい?

- 従来のsim-to-real転送手法は手動特徴設計や高コストな実世界微調整に依存。 - DreamTIPはTask-Invariant Propertiesを自動的に特定・活用し、手動設計を不要に。 - 動的変化に頑健でタスク間転送性の高い特性を利用し、効率的な適応を実現。 - シミュレーションと実世界の両方で最先端ベースラインを大幅に上回る性能を達成。 - 特に実世界Climbタスクでベースラインの10%成功率に対し100%成功率を達成。

3. 技術・手法の肝は?

- Dreamer world modelアーキテクチャ内でTask-Invariant Propertiesを学習。 - 大規模言語モデルが接触安定性や地形クリアランスなどの特性を特定。 - これらの特性を補助予測ターゲットとしてworld modelに統合。 - 混合リプレイバッファと正則化制約を用いた効率的適応戦略を設計。 - 表現崩壊と壊滅的忘却を軽減しつつ、実世界ダイナミクスに迅速に適応。

4. どうやって有効だと検証した?

- Stair, Climb, Tilt, Crawlを含む複雑地形での広範な実験を実施。 - シミュレーションと実世界環境の両方で評価。 - 8つの異なるシミュレーション転送タスクで平均28.1%の性能向上を達成。 - 実世界Climbタスクでベースラインの10%成功率に対し100%成功率を達成。 - 最先端ベースラインと比較して有意に優れることを実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- Dreamer (world modelベースの強化学習手法) - sim-to-real転送に関する一般的な手法 - 四足歩行ロボットの移動に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Junyang Liang, Yuxuan Liu, Yabin Chang, Junfan Lin, Junkai Ji, Hui Li, Changxin Huang, Jianqiang Li

分類: cs.RO

原文アブストラクト

Achieving quadruped robot locomotion across diverse and dynamic terrains presents significant challenges, primarily due to the discrepancies between simulation environments and real-world conditions. Traditional sim-to-real transfer methods often rely on manual feature design or costly real-world fine-tuning. To address these limitations, this paper proposes the DreamTIP framework, which incorporates Task-Invariant Properties learning within the Dreamer world model architecture to enhance sim-to-real transfer capabilities. Guided by large language models, DreamTIP identifies and leverages Task-Invariant Properties, such as contact stability and terrain clearance, which exhibit robustness to dynamic variations and strong transferability across tasks. These properties are integrated into the world model as auxiliary prediction targets, enabling the policy to learn representations that are insensitive to underlying dynamic changes. Furthermore, an efficient adaptation strategy is designed, employing a mixed replay buffer and regularization constraints to rapidly calibrate to real-world dynamics while effectively mitigating representation collapse and catastrophic forgetting. Extensive experiments on complex terrains, including Stair, Climb, Tilt, and Crawl, demonstrate that DreamTIP significantly outperforms state-of-the-art baselines in both simulated and real-world environments. Our method achieves an average performance improvement of 28.1% across eight distinct simulated transfer tasks. In the real-world Climb task, the baseline method achieved only a 10\ success rate, whereas our method attained a 100% success rate. These results indicate that incorporating Task-Invariant Properties into Dreamer learning offers a novel solution for achieving robust and transferable robot locomotion.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI