日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2512.00062

SpeedAug: テンポ強化方策とRL微調整による方策加速

SpeedAug: Policy Acceleration via Tempo-Enriched Policy and RL Fine-Tuning

シェア:XThreadsFacebookLINEはてブBluesky

人間のデモで訓練された遅い方策を、速度拡張デモからテンポ多様性を学びRL微調整でタスク最適な実行速度を獲得させることで高速化するフレームワーク。

詳しい要約

1. どんなもの?

- ロボットの実世界マニピュレーションタスクにおけるポリシー学習の高速化フレームワーク。 - 人間のデモンストレーションから学習したポリシーは、実行速度が遅い問題を解決。 - 強化学習(RL)を用いて、タスクに最適な実行テンポを学習。 - 速度拡張デモンストレーションからテンポ豊富な事前ポリシーを学習し、RLファインチューニングで効率的に探索。 - 実世界タスクでスループットを1.8倍向上、成功率を維持。

2. 先行研究と比べてどこがすごい?

- 既存のポリシー加速法は、データ前処理やヒューリスティックルールで実行テンポを決定。 - タスクに最適化された実行速度を学習するのではなく、固定または手動設定。 - SpeedAugはRLを用いてタスク最適な実行テンポを学習する点が新しい。 - サンプル効率を大幅に改善し、高い成功率を維持。

3. 技術・手法の肝は?

- 速度拡張デモンストレーションからテンポ豊富な事前ポリシーを学習。 - 多様な実行テンポを捉える。 - この事前ポリシーを基にRLファインチューニングを実施。 - 探索をガイドし、行動軌跡を洗練させ、実行テンポを効率的に最適化。

4. どうやって有効だと検証した?

- ロボットマニピュレーションベンチマークで実験。 - ポリシー加速のサンプル効率を大幅に改善し、高い成功率を維持。 - 実世界のマニピュレーションタスクに適用。 - 16分のオンラインインタラクションのみでスループットを1.8倍向上、成功率を損なわない。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の関連手法として、強化学習を用いたポリシー学習、デモンストレーションからの模倣学習、ポリシー加速法が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Taewook Nam, Junmo Cho, Youngsoo Jang, Sung Ju Hwang

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Robotic policy learning for complex real-world manipulation tasks has seen rapid recent progress, enabled in large part by the ability to collect demonstrations through human operation. However, policies trained from such demonstrations often execute tasks far more slowly than the robot's physical capabilities, as demonstration data is collected under practical constraints that favor conservative, success-oriented trajectories over execution speed. Existing policy acceleration methods determine execution tempo through data preprocessing or heuristic rules, rather than learning execution speed optimized for the task. In this paper, we propose SpeedAug, a policy acceleration framework that enables policies to learn task-optimal execution tempo via reinforcement learning (RL). SpeedAug first learns a tempo-enriched prior policy from speed-augmented demonstrations that captures diverse execution tempos. Building on this tempo-enriched prior, RL fine-tuning guides exploration to refine action trajectories and optimize execution tempo efficiently. Experiments on robotic manipulation benchmarks demonstrate that SpeedAug substantially improves the sample efficiency of policy acceleration while maintaining high success rates, achieving fast and stable task execution. Applied to a real-world manipulation task, SpeedAug improves task throughput by 1.8x using only 16 minutes of online interactions without compromising the success rate.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI