日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2603.14156

TransCurriculum: 高速かつ安定した移動のための多次元カリキュラム学習

TransCurriculum: Multi-Dimensional Curriculum Learning for Fast & Stable Locomotion

シェア:XThreadsFacebookLINEはてブBluesky

本論文では、四足歩行ロボットの高速移動を安定させるため、速度指令、地形難易度、ドメインランダム化の3軸を適応的に調整するトランスフォーマーを用いた多次元カリキュラム学習手法を提案し、シミュレーションと実機で検証した。

詳しい要約

1. どんなもの?

- 四足歩行ロボットの高速移動における安定性と転移損失を改善するための、Transformerベースの多次元カリキュラム学習手法「TransCurriculum」を提案。 - 速度指令、地形難易度、ドメインランダム化パラメータ(摩擦・ペイロード質量)の3軸を同時に適応させる。 - 報酬履歴をTransformerベースのteacherが利用し、将来の報酬・成功率・学習進捗を予測してカリキュラムを拡張。 - Unitree Go1ロボットでシミュレーション(Isaac Gym)と実機ゼロショット展開を検証。

2. 先行研究と比べてどこがすごい?

- 従来のカリキュラム学習は単一軸(速度範囲、地形難易度、ドメインランダム化)で難易度を変化させ、固定更新則や瞬間報酬を用いることが多く、訓練履歴を無視していた。 - TransCurriculumは多次元(速度・地形・ドメインランダム化)を同時に適応し、報酬履歴をカリキュラムレベルで活用する点が新しい。 - シミュレーションで最大速度6.3 m/sを達成し、従来のカリキュラムベースラインを上回る。 - 実機ではカーペット上で前方速度4.1 m/sを達成し、最速のカリキュラム手法より18.8%向上。 - 転移損失を27%から18%に低減し、成功率80-90%を維持。

3. 技術・手法の肝は?

- Transformerベースのteacherが報酬のシーケンスを取得し、将来の報酬、成功率、学習進捗を予測。 - 予測に基づいて多次元カリキュラムを高性能なタスクビンに向けて拡張。 - 報酬履歴を低レベル制御ポリシーに直接入力せず、カリキュラムレベルで活用。 - 速度指令、地形難易度、ドメインランダム化パラメータ(摩擦・ペイロード質量)の3軸を適応。

4. どうやって有効だと検証した?

- シミュレーション(Isaac Gym)でUnitree Go1ロボットを用いて検証。 - 実機Go1にゼロショット展開し、カーペット、スロープ、タイル、コンクリートなどの地形でテスト。 - シミュレーションで最大速度6.3 m/sを達成し、従来のカリキュラムベースラインを上回る。 - 実機でカーペット上前方速度4.1 m/sを達成し、最速のカリキュラム手法より18.8%向上。 - 転移損失が27%から18%に低減し、剛性屋内・屋外表面で成功率80-90%を維持。

5. 議論はある?

- 多次元カリキュラムの同時訓練が速度・地形・ドメインランダム化の各次元にわたる利点を示し、転移損失を低減。 - 成功率80-90%を維持しつつ高速移動を実現。 - 具体的な議論や限界については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:従来のカリキュラム学習ベースライン(速度のみ、地形のみ、ドメインランダム化のみのカリキュラム)。 - 関連手法:Transformerベースのteacher-student学習、ドメインランダム化、Isaac Gymを用いた四足歩行ロボットの強化学習。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Prakhar Mishra, Amir Hossain Raj, Xuesu Xiao, Dinesh Manocha

分類: cs.RO

原文アブストラクト

High-speed legged locomotion struggles with stability and transfer losses at higher command velocities during deployment. One reason is that most curricula vary difficulty along single axis, for example increase the range of command velocities, terrain difficulty, or domain parameters (e.g. friction or payload mass) using either fixed update rule or instantaneous rewards while ignoring how the history of robot training has evolved. We propose TransCurriculum, a transformer-based multi-dimensional curriculum learning approach for agile quadrupedal locomotion. TransCurriculum adapts to 3 axes, velocity command targets, terrain difficulty, and domain randomization parameters (friction and payload mass). Rather than feeding task reward history directly into the low-level control policy, our formulation exploits it at the curriculum level. A transformer-based teacher retrieves the sequence of rewards and uses it to predict future rewards, success rate, and learning progress to guide expansion of this multidimensional curriculum towards high performing task bins. Finally we validate our approach on the Unitree Go1 robot in simulation (Isaac Gym) and deploy it zero-shot on Go1 hardware. Our TransCurriculum policy achieves a maximum velocity of 6.3 m/s in simulation and outperforms prior curriculum baselines. We tested our TransCurriculum trained policy on terrains (carpets, slopes, tiles, concrete), achieving a forward velocity of 4.1 m/s on carpet surpassing the fastest curriculum methods by 18.8% and achieves maximum zero-shot value among all tested methods. Our multi-dimensional curriculum also reduces the transfer loss to 18% from 27% for command only curriculum, demonstrating the benefits of joint training over velocity, terrain and domain randomization dimension while keeping the task success rate of 80-90% on rigid indoor and outdoor surfaces.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI