日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2602.09430

Sci-VLA: 科学実験の長期的タスクのためのエージェント型VLA推論プラグイン

Sci-VLA: Agentic VLA Inference Plugin for Long-Horizon Tasks in Scientific Experiments

シェア:XThreadsFacebookLINEはてブBluesky

科学実験の長期的タスクにおいて、VLAモデルが苦手とする原子タスク間の遷移をLLMエージェントが推論・補完し、追加学習なしで複合タスクを実行可能にする推論プラグインを提案。

詳しい要約

1. どんなもの?

- 科学実験の長期的タスクをロボットで実行するためのVLAモデル推論プラグイン。 - LLMベースのエージェント推論機構を導入し、逐次操作タスク実行時に介入。 - 明示的な遷移推論と遷移ロボット行動コード生成により、VLAモデルを誘導。 - 追加訓練なしで複合科学ワークフローの信頼性を向上。

2. 先行研究と比べてどこがすごい?

- 従来の科学タスク向けVLAモデルは訓練済み原子タスクの再順序・合成で失敗。 - 訓練時原子タスクと推論時複合タスクの分布不一致が原因。 - 提案手法は推論のみの介入で追加訓練不要、計算効率・データ効率が高い。 - オープンエンドで長期的なロボット実験タスクに適する。

3. 技術・手法の肝は?

- LLMベースのエージェント推論機構が逐次操作タスク実行時に介入。 - 明示的な遷移推論を行い、遷移ロボット行動コードを生成。 - これによりVLAモデルが欠落した遷移ステップを補完。 - 追加訓練なしで複合科学ワークフローを信頼性高く実行。

4. どうやって有効だと検証した?

- 既存シミュレーション環境内に科学機器と一般的な科学操作シーンの3Dアセットを構築。 - これらのシーンで、推論時の原子タスクあたり平均成功率が42%向上することを検証。 - さらに、シミュレーションから実際の科学実験室への容易な転移を示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、VLAモデル(例: RT-1, RT-2, Octo)やLLMベースのエージェント(例: SayCan, Code as Policies)が関連。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yiwen Pang, Bo Zhou, Changjin Li, Xuanhao Wang, Shengxiang Xu, Deng-Bao Wang, Min-Ling Zhang, Shimin Di

分類: cs.RO, cs.AI

原文アブストラクト

Robotic laboratories play a critical role in autonomous scientific discovery by enabling scalable, continuous experimental execution. Recent vision-language-action (VLA) models offer a promising foundation for robotic laboratories. However, scientific experiments typically involve long-horizon tasks composed of multiple atomic tasks, posing a fundamental challenge to existing VLA models. While VLA models fine-tuned for scientific tasks can reliably execute atomic experimental actions seen during training, they often fail to perform composite tasks formed by reordering and composing these known atomic actions. This limitation arises from a distributional mismatch between training-time atomic tasks and inference-time composite tasks, which prevents VLA models from executing necessary transitional operations between atomic tasks. To address this challenge, we propose an Agentic VLA Inference Plugin for Long-Horizon Tasks in Scientific Experiments. It introduces an LLM-based agentic inference mechanism that intervenes when executing sequential manipulation tasks. By performing explicit transition inference and generating transitional robotic action code, the proposed plugin guides VLA models through missing transitional steps, enabling reliable execution of composite scientific workflows without any additional training. This inference-only intervention makes our method computationally efficient, data-efficient, and well-suited for open-ended and long-horizon robotic laboratory tasks. We build 3D assets of scientific instruments and common scientific operating scenes within an existing simulation environment. In these scenes, we have verified that our method increases the average success rate per atomic task by 42\% during inference. Furthermore, we show that our method can be easily transferred from the simulation to real scientific laboratories.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI