日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2605.21862

EvoScene-VLA: アクションデコーダ内でシーン信念を進化させ、チャンク化ロボット制御を実現

EvoScene-VLA: Evolving Scene Beliefs Inside the Action Decoder for Chunked Robot Control

シェア:XThreadsFacebookLINEはてブBluesky

ロボットのアクションによって変化するシーン状態を、チャンク間で持続的に更新するVLAポリシーを提案し、シミュレーションと実機で成功率を向上させた。

詳しい要約

1. どんなもの?

- 本論文は、chunked vision-language-action (VLA) policies のための新しい手法 EvoScene-VLA を提案する。 - 従来の chunked VLA は、各更新を現在の視覚観測のみに条件付け、複数ステップのロボット制御を予測する。 - しかし、ロボットの行動は接触・遮蔽・物体運動を引き起こし、次の視覚更新が来る前に後の決定が依存する幾何が変化しうる。 - 本手法は、制御呼び出しをまたいで持続する action-updated scene state を導入する。 - これにより、各制御呼び出しが最近の行動と新鮮な視覚証拠の両方を反映した scene prior から開始される。

2. 先行研究と比べてどこがすごい?

- Spatial VLAs は現在フレームの幾何を改善する。 - Temporal VLAs は過去フレームを集約する。 - しかし、どちらも chunk をまたいで action-updated scene prior を維持しない。 - 本手法は、制御呼び出しをまたぐ persistent action-updated scene state を維持する点で先行研究と異なる。 - これにより、次の視覚更新が来る前に変化する幾何に対処できる。

3. 技術・手法の肝は?

- recurrent scene prefix が chunk をまたいで geometry-aware scene state を運ぶ。 - 各 vision-language model (VLM) 呼び出しで、VLM は現在の観測からの scene information と前 chunk からの action-updated prior を組み合わせる。 - action decoder は次の action chunk と compact scene update の両方を出力する。 - この update が次の prior となり、次の呼び出し時に VLM が新しい観測に対して補正する。 - 訓練時には Scene Predictor が future scene-token targets を供給し、Geometric Anchor が scene slots を frozen depth および 3D teachers に整列させる。 - 展開時には両モジュールを破棄する。

4. どうやって有効だと検証した?

- 31 の RoboTwin タスクで評価。 - fixed evaluation では平均成功率が 87.2% から 89.1% に向上。 - randomized evaluation では 86.1% から 88.5% に向上。 - Galaxea R1-Lite 実機で、EvoScene-VLA はすべてのベースラインを上回った。

5. 議論はある?

- 要旨からは、具体的な議論や限界についての記述は不明。 - 提案手法の有効性は示されているが、計算コストやスケーラビリティに関する議論は要旨からは不明。 - 訓練時の補助モジュールを展開時に破棄する点の影響についても要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究として、Spatial VLAs と Temporal VLAs が挙げられる。 - 具体的な論文名は要旨からは不明。 - 同分野の定番として、vision-language-action (VLA) policies や chunked robot control に関する研究が次に読むべき候補となる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chushan Zhang, Ruihan Lu, Jinguang Tong, Xuesong Li, Yikai Wang, Hongdong Li

分類: cs.RO, cs.AI

原文アブストラクト

Chunked vision-language-action (VLA) policies predict multi-step robot controls, conditioning each update on the current visual observation alone. Yet robot actions cause contact, occlusion, and object motion, and the geometry that later decisions depend on can change before the next visual update arrives. Spatial VLAs improve current-frame geometry. Temporal VLAs aggregate past frames. Neither maintains an action-updated scene prior across chunks. We argue for a persistent action-updated scene state across control calls, and introduce EvoScene-VLA. Its recurrent scene prefix carries a geometry-aware scene state across chunks. At each vision-language model (VLM) call, the VLM combines scene information from the current observation with the action-updated prior from the previous chunk; the action decoder outputs both the next action chunk and a compact scene update. This update becomes the next prior, which the VLM corrects against the new observation when the next call arrives. Each control call therefore starts from a scene prior that reflects both recent actions and fresh visual evidence. During training, \textbf{Scene Predictor} supplies future scene-token targets, and Geometric Anchor aligns scene slots with frozen depth and 3D teachers. We discard both modules at deployment. On 31 RoboTwin tasks, EvoScene-VLA raises average success from 87.2% to 89.1% in fixed evaluation and from 86.1% to 88.5% in randomized evaluation. On the Galaxea R1-Lite real robot, EvoScene-VLA outperforms all baselines.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI