日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2604.23121

ロックインの打破:低データVLA後訓練における操縦性の維持

Breaking Lock-In: Preserving Steerability under Low-Data VLA Post-Training

シェア:XThreadsFacebookLINEはてブBluesky

低データでの後訓練後にVLAポリシーが新しい指示に応答しなくなる「ロックイン」現象を特定し、視覚的接地の維持とテスト時の対照的プロンプトガイダンスによりこれを緩和するDeLockを提案した。

詳しい要約

1. どんなもの?

- 低データのSFT後、VLAポリシーが新規指示に応答せず、post-trainingで見た行動に限定される現象をlock-inと定義。 - 概念lock-in(訓練物体/属性への固執)と空間lock-in(訓練空間ターゲットへの固執)がある。 - DeLockは、post-training中の視覚的groundingを保持し、テスト時にcontrastive prompt guidanceを適用してlock-inを緩和する手法。

2. 先行研究と比べてどこがすごい?

- 既存の対策はfoundation model由来の追加監督信号や補助目的、拡張データセットに依存。 - DeLockはポリシーの内部事前学習知識のみで十分と示し、追加監督やデータ拡張を不要にする。 - 8つのシミュレーションと実世界評価で強力なベースラインを上回り、より多くのキュレートされたデモでpost-trainingされたSOTA汎用ポリシーに匹敵または超過。

3. 技術・手法の肝は?

- post-training中に視覚的groundingを保持する。 - テスト時にcontrastive prompt guidanceを適用し、新規指示に従ってポリシーのdenoising dynamicsを操舵。 - これにより概念lock-inと空間lock-inの両方を緩和。

4. どうやって有効だと検証した?

- 8つのシミュレーションおよび実世界評価を実施。 - DeLockは強力なベースラインを一貫して上回る。 - より多くのキュレートされたデモでpost-trainingされたSOTA汎用ポリシーと同等以上。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:foundation model由来の追加監督信号を用いる手法、補助目的を用いる手法、拡張データセットを用いる手法、SOTA汎用ポリシー。 - 関連手法:vision-language-action (VLA) policy、supervised fine-tuning (SFT)、contrastive prompt guidance、denoising dynamics。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Suning Huang, Jiaqi Shao, Ke Wang, Qianzhong Chen, Jiankai Sun, Yanjiang Guo, Mac Schwager, Jeannette Bohg

分類: cs.RO, cs.CV

原文アブストラクト

Have you ever post-trained a generalist vision-language-action (VLA) policy on a small demonstration dataset, only to find that it stops responding to new instructions and is limited to behaviors observed during post-training? We identify this phenomenon as lock-in: after low-data, supervised fine-tuning (SFT), the policy becomes overly specialized to the post-training data and fails to generalize to novel instructions, manifesting as concept lock-in (fixation on training objects/attributes) and spatial lock-in (fixation on training spatial targets). Many existing remedies introduce additional supervision signals, such as those derived from foundation models or auxiliary objectives, or rely on augmented datasets to recover generalization. In this paper, we show that the policy's internal pre-trained knowledge is sufficient: DeLock mitigates lock-in by preserving visual grounding during post-training and applying test-time contrastive prompt guidance to steer the policy's denoising dynamics according to novel instructions. Across eight simulation and real-world evaluations, DeLock consistently outperforms strong baselines and matches or exceeds the performance of a state-of-the-art generalist policy post-trained with substantially more curated demonstrations.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI