日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2603.08269

SAIL: VLMを用いた文脈内模倣学習のためのテスト時スケーリング

SAIL: Test-Time Scaling for In-Context Imitation Learning with VLM

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの模倣学習を反復的な軌道改善問題として捉え、モンテカルロ木探索と視覚言語モデルによる評価でテスト時の計算量を増やすほど成功率を高めるフレームワークSAILを提案。

詳しい要約

1. どんなもの?

VLMを用いたin-context imitation learningの枠組みSAILを提案。ロボットの模倣を反復的洗練問題として再定式化し、test-time computeでスケール可能にする。Monte Carlo Tree Search (MCTS)を採用し、各ノードは完全なtrajectory、エッジはtrajectoryのrefinementに対応。3つの要素で誘導:成功trajectoryの自動archiveによる文脈的検索、VLMベースのscoring機構、step-level feedback。6つの多様なmanipulationタスクでシミュレーションと実世界検証を実施。

2. 先行研究と比べてどこがすごい?

従来のin-context imitation learningはone-shot trajectory生成が環境変動下で脆弱。SAILはtest-time computeを増やすことで成功率が一貫して向上し、複雑タスクで最大95%を達成。trajectory-levelのtest-time scalingがより汎化可能なロボットエージェントへの堅牢な道であることを示唆。

3. 技術・手法の肝は?

MCTSを中核とし、各ノードを完全なtrajectory、エッジをtrajectory refinementとする。3つの主要コンポーネント:(1) 成功trajectoryの自動archiveによる文脈的検索、(2) VLMベースのscoring機構によるtrajectory評価、(3) step-level feedbackによるtrajectory整合スコアの提供と反復的洗練。

4. どうやって有効だと検証した?

6つの多様なmanipulationタスクでシミュレーションと実世界検証を実施。test-time computeの増加に伴い成功率が一貫して向上し、複雑タスクで最大95%の成功率を達成。

5. 議論はある?

trajectory-levelのtest-time scalingがより汎化可能なロボットエージェントへの堅牢な道であると示唆。ただし、限界や課題についての具体的な議論は要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。関連手法としてin-context imitation learning、Monte Carlo Tree Search (MCTS)、vision language model (VLM)を用いたロボット学習の論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Makoto Sato, Yusuke Iwasawa, Yujin Tang, So Kuroki

分類: cs.RO, cs.AI

原文アブストラクト

In-context imitation learning allows robots to acquire skills from demonstrations, yet one-shot trajectory generation remains fragile under environmental variation. We propose SAIL, a framework that reframes robot imitation as an iterative refinement problem capable of scaling with test-time compute. SAIL utilizes Monte Carlo Tree Search, where each node is a complete trajectory and edges correspond to trajectory refinements. The process is guided by three core components: an automated archive of successful trajectories for contextually relevant retrieval, a vision language model-based scoring mechanism for trajectory evaluation, and a step-level feedback that provides trajectory-aligned scores for iterative refinement. Experiments across six diverse manipulation tasks in simulation and real-world validation clearly demonstrate that increasing test-time compute consistently improves success rates, achieving up to 95% on complex tasks. Our results suggest that trajectory-level test-time scaling is a robust path toward more generalizable robotic agents.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI