日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2606.00229

視覚言語行動のための連続推論

Continuous Reasoning for Vision-Language-Action

シェア:XThreadsFacebookLINEはてブBluesky

自然言語はタスクレベルの粒度であり連続制御には不向きなため、VLAポリシーに適した連続思考を導入し、共有ガウス潜在変数として自己検証目的で学習する手法を提案した。

詳しい要約

1. どんなもの?

Vision-Language-Action (VLA) ポリシー向けに、自然言語の代わりとなる連続的な推論媒体を提案する研究。テキストや明示的サブゴールはタスク粒度で、連続制御の細かい時間スケールと不一致であると指摘。そこで「Continuous Reasoning for Vision-Language-Action」を提案し、構造化された連続的思考 (continuous thoughts) を予測し、それを chunk 構造の行動生成の共有コンテキストとして再利用する。

2. 先行研究と比べてどこがすごい?

従来の VLA は自然言語や明示的サブゴールを推論媒体として用いるが、これらはタスク粒度で制御の細かさと合わない。提案手法は、モデル間で共有可能 (shareable)、下流の行動改善で検証可能 (verifiable)、時間的に拡張された制御構造と整合する連続的推論媒体を導入する点が異なる。単なる行動予測改善ではなく、共有・検証可能な内部媒体であることを重視する。

3. 技術・手法の肝は?

連続的推論を shared Gaussian latent interface として実装し、self-verification objective で訓練する。具体的には、exponential-moving-average (EMA) teacher が student の推論を消費して目標行動を予測できることを要求する。これにより、モデル固有のショートカットではなく、共有可能で検証可能な推論媒体となることを狙う。

4. どうやって有効だと検証した?

LIBERO-PRO でのロバスト性向上と、実機ロボットでの強い性能を報告。TX-G2 (AgiBot G2-compatible variant) では π0.5 に対して平均サブタスク成功率を 40.4% 向上、HSR では 26.3% 向上した。

5. 議論はある?

良い行動予測だけでは良い推論を保証しないと議論。同じ内部媒体がモデル間で共有でき、下流制御の改善を通じて独立に検証できなければ、追加された潜在はモデル固有のショートカットになり、見た行動には役立っても汎化可能な制御を支えない可能性がある。

6. 次に読むべき論文は?

要旨で参照/比較されている研究として π0.5 が挙げられる。また、VLA の推論媒体として自然言語や明示的サブゴールを用いる従来手法、および LIBERO-PRO ベンチマークが関連する。同分野の定番としては RT-2、OpenVLA などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yueh-Hua Wu, Tatsuya Matsushima, Kei Ota

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Natural language is a powerful reasoning medium for language and vision-language models, but it is mismatched to the granularity of continuous control. Text and explicit subgoals operate at task-level granularity, whereas vision-language-action (VLA) policies must choose actions at a much finer temporal scale; a single reasoning step can therefore span many action chunks while remaining only weakly coupled to the action needed now. This suggests a different question for VLA: what should play the role of language? We argue that a useful VLA reasoning medium must be shareable across model instances, verifiable through downstream action improvement, and aligned with temporally extended control structure. Based on this view, we propose Continuous Reasoning for Vision-Language-Action. Our model first predicts continuous reasoning in the form of a structured set of continuous thoughts, then reuses them as shared context for chunk-structured action generation. Better action prediction alone does not certify good reasoning: if the same internal medium cannot be shared across model instances and independently verified through improved downstream control, the added latent may simply become a model-private shortcut that helps on seen behaviors without supporting generalizable control. We therefore instantiate continuous reasoning as a shared Gaussian latent interface and train it with a self-verification objective in which an exponential-moving-average teacher must successfully consume the student's reasoning when predicting target actions. Empirically, Continuous Reasoning improves LIBERO-PRO robustness and performs strongly on real robots, raising mean subtask success over {\pi}0.5 by 40.4% on TX-G2, an AgiBot G2-compatible variant, and 26.3% on HSR. This suggests that reasoning in VLA is less about extra tokens than about a shareable, verifiable internal language for action.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI