日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2609.29394

RACaP: 進化可能なロボット学習のためのポリシーとしての推論・行動・コーディング

RACaP: Agentic Reasoning, Acting, and Coding as Policies for Evolvable Robot Learning

シェア:XThreadsFacebookLINEはてブBluesky

コード生成を進化フェーズに移し、展開時は凍結された型付きポリシーAPIをReActループで呼び出すエージェント型フレームワークを提案。長期的タスクで成功率と速度を大幅に改善し、小型モデルへの蒸留で実機展開を効率化した。

詳しい要約

1. どんなもの?

- 汎用ロボットエージェントが経験から学び、新タスクへ転移し、効率的に行動するためのフレームワーク RACaP を提案。 - コーディングを進化の段階に移し、展開時は Reasoning-and-Acting (ReAct) ループで凍結された typed Policy API を呼び出す。 - 二段階戦略として capability curriculum learning と autonomous self-evolution を組み合わせ、API・ReAct harness・experience memory を改善。 - API は再利用可能な物理メカニズムを符号化し、実行時適応用の引数を公開。 - ReAct は作業記憶・長期経験記憶・視覚フィードバックを統合し、ソースコード変更なしに行動選択・結果検証・失敗回復を行う。

2. 先行研究と比べてどこがすごい?

- 従来の Code as Policies (CaP) は実行時にプログラムを生成・修復するため遅延が生じ、再利用可能なメカニズムとタスク固有の決定が絡み合う。 - RACaP はコーディングを進化段階に移し、展開時は凍結 API を呼ぶことでこの問題を分離。 - LIBERO-90 で 54.4%、zero-shot LIBERO-PRO で 45.0%、LIBERO-Long で 46.0% の成功率を達成し、長地平タスクで CaP ベースラインの最大 4.0% を大きく上回る。 - LIBERO-PRO では CaP ベースラインの 2.5 倍の成功率と、median policy time で 1.9 倍の高速化を実現。

3. 技術・手法の肝は?

- 二段階戦略: capability curriculum learning と autonomous self-evolution を組み合わせ、API・ReAct harness・experience memory を改善。 - API は再利用可能な物理メカニズムを符号化し、実行時適応のための引数を公開。 - ReAct ループは task-specific working memory、long-term experience memory、visual feedback を統合し、行動選択・結果検証・失敗回復をソースコード変更なしで実行。 - オンボット展開のため rejection-sampled fine-tuning で GPT-5.6 の ReAct 決定を Qwen3-VL-8B-Instruct に蒸留。

4. どうやって有効だと検証した?

- LIBERO-90、zero-shot LIBERO-PRO、LIBERO-Long のベンチマークで評価。 - 成功率: LIBERO-90 54.4%、zero-shot LIBERO-PRO 45.0%、LIBERO-Long 46.0%。 - 長地平タスクで CaP ベースラインの最大 4.0% を上回る。 - LIBERO-PRO で CaP ベースラインの 2.5 倍の成功率、median policy time で 1.9 倍の高速化。 - 蒸留により per-decision inference で 13.2 倍の高速化、繰り返し物理呼び出しを 16 回から 4 回に削減。

5. 議論はある?

- 再利用可能なコードと実行時決定を分離することで、継続的進化・効果的転移・効率的な長地平制御が可能になると主張。 - 具体的な限界や失敗事例、計算コスト、スケーラビリティに関する議論は要旨からは不明。

6. 次に読むべき論文は?

- Code as Policies (CaP) ベースライン - ReAct (Reasoning-and-Acting) フレームワーク - LIBERO ベンチマーク (LIBERO-90, LIBERO-PRO, LIBERO-Long) - GPT-5.6 および Qwen3-VL-8B-Instruct を用いた蒸留手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zexi Li, Yehang Zhang, Haojian Huang, Bohan Zhou, Wenqian Li, Chenxu Wang, Yifan Chang, Yangkai Wei, Tianyi Zhang, Ying-Cong Chen, Kaiwen Zhou, Yinchuan Li, James Cheng

分類: cs.RO

原文アブストラクト

General-purpose robot agents must learn from experience, transfer to new tasks, and act efficiently. Code as Policies (CaP) methods generate and repair programs at runtime, incurring latency and entangling reusable mechanisms with task-specific decisions. We introduce RACaP, an agentic framework that moves coding to evolution and uses a Reasoning-and-Acting (ReAct) loop to call frozen, typed Policy APIs at deployment. A two-phase strategy combines capability curriculum learning with autonomous self-evolution to improve the APIs, the ReAct harness, and experience memory. The APIs encode reusable physical mechanisms while exposing arguments for runtime adaptation. ReAct combines task-specific working memory, long-term experience memory, and visual feedback to select actions, verify outcomes, and recover from failures without modifying source code. RACaP achieves 54.4% success on LIBERO-90, 45.0% on zero-shot LIBERO-PRO, and 46.0% on LIBERO-Long, compared with at most 4.0% for CaP baselines on long-horizon tasks. On LIBERO-PRO, it achieves 2.5 times the success rate of CaP baselines and a 1.9-fold speedup in median policy time. For efficient on-robot deployment, rejection-sampled fine-tuning distills GPT-5.6 ReAct decisions into Qwen3-VL-8B-Instruct, yielding a 13.2-fold per-decision inference speedup and reducing repeated physical calls from 16 to 4. These results show that separating reusable code from runtime decisions supports continued evolution, effective transfer, and efficient long-horizon control.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI