日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.02104

ACDC: ロボットマニピュレーションにおける目標条件付き強化学習のための動的対照制御を伴う適応的カリキュラム計画

ACDC: Adaptive Curriculum Planning with Dynamic Contrastive Control for Goal-Conditioned Reinforcement Learning in Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

人間の学習に着想を得て、多次元の適応的カリキュラム計画と動的対照制御を統合し、ロボットマニピュレーションの目標条件付き強化学習の性能を向上させる手法を提案した。

詳しい要約

1. どんなもの?

- Goal-conditioned reinforcement learning (GCRL) を用いたロボットマニピュレーションの性能向上を目指す手法。 - 人間の学習行動に着想を得て、Adaptive Curriculum (AC) Planning と Dynamic Contrastive (DC) Control を統合した ACDC を提案。 - 学習軌道を適切に設計し、エージェントを導く包括的な学習パラダイム。

2. 先行研究と比べてどこがすごい?

- 既存手法は収集経験の優先順位付けに依存し、多様なタスクで性能が不十分。 - ACDC は多次元の適応的カリキュラム計画と動的対照制御を組み合わせ、サンプル効率と最終成功率で state-of-the-art ベースラインを一貫して上回る。

3. 技術・手法の肝は?

- 計画レベル: AC コンポーネントがエージェントの成功率と訓練進捗に基づき、多様性駆動の探索と品質駆動の活用を動的にバランス。 - 制御レベル: DC コンポーネントが norm-constrained contrastive learning によりカリキュラム計画を実行。 - 大きさに導かれた経験選択を現在のカリキュラム焦点に合わせて実現。

4. どうやって有効だと検証した?

- 挑戦的なロボットマニピュレーションタスクで広範な実験を実施。 - ACDC がサンプル効率と最終タスク成功率の両方で state-of-the-art ベースラインを一貫して上回ることを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として goal-conditioned reinforcement learning (GCRL) や curriculum learning、contrastive learning に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xuerui Wang, Guangyu Ren, Tianhong Dai, Bintao Hu, Shuangyao Huang, Wenzhang Zhang, Hengyan Liu

分類: cs.RO

原文アブストラクト

Goal-conditioned reinforcement learning has shown considerable potential in robotic manipulation; however, existing approaches remain limited by their reliance on prioritizing collected experience, resulting in suboptimal performance across diverse tasks. Inspired by human learning behaviors, we propose a more comprehensive learning paradigm, ACDC, which integrates multidimensional Adaptive Curriculum (AC) Planning with Dynamic Contrastive (DC) Control to guide the agent along a well-designed learning trajectory. More specifically, at the planning level, the AC component schedules the learning curriculum by dynamically balancing diversity-driven exploration and quality-driven exploitation based on the agent's success rate and training progress. At the control level, the DC component implements the curriculum plan through norm-constrained contrastive learning, enabling magnitude-guided experience selection aligned with the current curriculum focus. Extensive experiments on challenging robotic manipulation tasks demonstrate that ACDC consistently outperforms the state-of-the-art baselines in both sample efficiency and final task success rate.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI