日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.27268

E-TTS:ロボット操作のための新しい具現化テスト時スケーリングフレームワーク

E-TTS: A New Embodied Test-Time Scaling Framework for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作タスクにおいて、推論と行動の両方を履歴情報を活用して反復的に洗練する、モジュール式でプラグアンドプレイなテスト時スケーリングフレームワークを提案した。

詳しい要約

1. どんなもの?

- ロボティックマニピュレーション向けの新しいEmbodied Test-Time ScalingフレームワークE-TTSを提案。 - 推論(reasoning)と行動(action)のスケーリングを統合し、履歴を考慮した反復的洗練を行う。 - モジュール式でプラグアンドプレイ、タスクに応じて柔軟に構成可能。 - vision-language verifiersを用いて候補を評価する。

2. 先行研究と比べてどこがすごい?

- 既存のembodied test-time scaling研究は推論のスケーリング機構をほとんど研究していない。 - また、長期的・逐次的なembodiedタスクでは履歴情報が不可欠だが、現在の観測のみに依存する手法が多かった。 - E-TTSは推論と行動の両方をスケーリングし、履歴を活用する点で先行研究と異なる。 - 開ループのTTS手法とは異なり、フィードバック生成を導入した閉ループ反復洗練を実現。

3. 技術・手法の肝は?

- 推論と行動のジョイントサンプリングとスコアリングをペアワイズで実施。 - 履歴バッファに過去のコンテキストを保存し、推論および行動verifierが候補評価に利用。 - サンプリングプロセスにフィードバック生成を組み込み、閉ループの反復洗練機構を形成。 - 各コンポーネントは独立かつ組み合わせ可能なモジュールとして機能。

4. どうやって有効だと検証した?

- 4つの異なるベンチマーク、6つの環境、3つのembodiment、4つのbase vision-language-actionモデルで実験。 - 追加の専門家データ収集や再トレーニングなしで、一貫した性能向上を確認。 - シミュレーションで最大33.14%、実世界で最大26.62%の性能向上を達成。

5. 議論はある?

- 要旨からは、限界や議論の詳細は不明。 - ただし、推論スケーリング機構の研究不足と履歴情報の活用不足という課題に対処。 - 閉ループ反復洗練により推論効率と環境適応性を向上させると主張。

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な研究は明記されていない。 - 関連手法として、embodied test-time scaling、vision-language-actionモデル、test-time scaling (TTS) の既存研究が挙げられる。 - 同分野の定番として、RT-1、RT-2、OpenVLAなどのvision-language-actionモデルや、test-time scalingの一般手法を読むと良い。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wen Ye, Peiyan Li, Tingyu Yuan, Yuan Xu, Xiangnan Wu, Chaoyang Zhao, Jing Liu, Nianfeng Liu, Yan Huang, Liang Wang

分類: cs.RO, cs.AI

原文アブストラクト

Recently, a few works have made early attempts to study test-time scaling for embodied tasks. However, two major challenges remain unsolved: (1) reasoning can effectively improve the performance of the policy, but its scaling mechanism has seldom been studied; (2) historical information is essential, as embodied tasks are inherently long-horizon and sequential, making sole reliance on current observations for action scaling inadequate due to the lack of historical context utilization. To address these challenges, we introduce E-TTS, a modular and plug-and-play Embodied Test-Time Scaling framework that unifies reasoning and action scaling for robotic manipulation via history-aware iterative refinement with vision-language verifiers. To support joint reasoning-action scaling, E-TTS performs reasoning-action joint sampling and scoring in a pairwise manner. To better utilize historical information, E-TTS uses a history buffer to store historical context, which is then used by reasoning and action verifiers to evaluate the sampled candidates. Unlike conventional open-loop TTS methods, E-TTS introduces feedback generation into the sampling process to form a closed-loop iterative refinement mechanism, enhancing both inference efficiency and environmental adaptability. Each component functions as an independent and composable module, allowing flexible and adaptive configuration depending on task requirements. To evaluate the advantages of our framework, we conduct experiments across 4 different benchmarks, 6 environments, 3 embodiments, and 4 base vision-language-action models. The experimental results demonstrate that, without requiring additional expert data collection or retraining, E-TTS consistently improves performance, achieving up to a 33.14% increase in simulation and 26.62% in real-world scenarios.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI