日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

スキル獲得arXiv:2606.19419

遊び心のあるエージェント型ロボット学習

Playful Agentic Robot Learning

シェア:XThreadsFacebookLINEはてブBluesky

ロボットエージェントが指示なしで自己主導の「遊び」を通じてスキルを獲得し、後続タスクに活用する手法を提案。コード生成エージェントチーム(RATs)が探索タスクを生成・実行・検証・修正し、成功体験をコードスキルライブラリに蓄積する。

詳しい要約

1. どんなもの?

- 自己主導の遊びを通じてスキルを継続的に学習する、身体性を持つコーディングエージェントの枠組み。 - 下流タスクが到着する前に、遊びの段階で再利用可能なスキルを獲得する。 - RATs (Robotics Agent Teams) を導入し、遊び時間中のスキル獲得を設計。 - テスト時には凍結されたスキルライブラリから関連スキルを再利用して新規タスクを解決。

2. 先行研究と比べてどこがすごい?

- 従来のエージェント型ロボットシステムはタスク駆動型で、明示的な指示後にのみ再利用可能スキルを獲得。 - 本研究は自己主導の遊びを継続的スキル学習段階として位置づけ、下流タスク前にスキルを蓄積。 - 実験で no-play および random-play ベースラインを上回り、CaP-Agent0 に対して LIBERO-PRO で 20.6 ポイント、MolmoSpaces で 17.0 ポイントの改善。 - 学習したスキルは他の推論時 Code-as-Policy エージェントにコンテキストとして检索するだけで組み込み可能。

3. 技術・手法の肝は?

- RATs は遊び中に新規かつ学習可能な探索タスクを提案。 - ロボットコードポリシーを計画・実行し、中間進捗を検証。 - 失敗を診断し、密なステップレベルのフィードバックで再試行。 - 成功した実行を永続的なコードスキルライブラリに蒸留。 - テスト時には凍結ライブラリから関連スキルを检索して再利用。

4. どうやって有効だと検証した?

- LIBERO-PRO と MolmoSpaces での実験。 - 遊びで学習したスキルが、no-play および random-play ベースラインよりも未見の下流タスクで改善。 - CaP-Agent0 に対して LIBERO-PRO で 20.6 ポイント、MolmoSpaces で 17.0 ポイントの向上。 - 学習スキルを他の推論時 Code-as-Policy エージェントに检索して組み込むと、RoboSuite と実世界転移でそれぞれ 8.9 ポイント、8.8 ポイント改善(モデルのファインチューニングなし)。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- CaP-Agent0(比較対象として言及) - LIBERO-PRO(ベンチマーク) - MolmoSpaces(ベンチマーク) - RoboSuite(ベンチマーク) - Code-as-Policy エージェント(関連手法)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Junyi Zhang, Jiaxin Ge, Hanjun Yoo, Letian Fu, Zihan Yang, Yaowei Liu, Raj Saravanan, Shaofeng Yin, Justin Yu, Dantong Niu, Zirui Wang, Roei Herzig, Ken Goldberg, Yutong Bai, David M. Chan, Ion Stoica, Angjoo Kanazawa, Jiahui Lei, Haiwen Feng, Trevor Darrell

分類: cs.RO, cs.AI

原文アブストラクト

Current agentic robot systems can write executable Code-as-Policy programs, observe feedback, and revise behavior across multiple attempts, but they remain largely task-driven: reusable skills are acquired only after explicit instructions. We study Playful Agentic Robot Learning, where an embodied coding agent uses self-directed play as a continual skill-learning stage before downstream tasks arrive. We introduce RATs, Robotics Agent Teams designed for play-time skill acquisition. During play, RATs proposes novel yet learnable exploratory tasks, plans and executes robot-code policies, verifies intermediate progress, diagnoses failures, retries with dense, step-level feedback, and distills successful executions into a persistent code skill library. At test time, the agent reuses relevant skills from this frozen library to help solve new tasks. Experiments in LIBERO-PRO and MolmoSpaces show that play-learned skills improve held-out downstream tasks over no-play and random-play baselines, with 20.6 and 17.0 percentage-point gains over CaP-Agent0 on LIBERO-PRO and MolmoSpaces, respectively. Moreover, the learned skills can be plugged into other inference-time Code-as-Policy agents by simply retrieving them into the context, improving RoboSuite and real-world transfer by 8.9 and 8.8 points, respectively, without finetuning the underlying model.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI