日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2605.10819

代数的一貫性を持つ潜在アクションモデル:視覚・言語・行動モデルのためのALAM

ALAM: Algebraically Consistent Latent Action Model for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

アクションラベルなしの動画から潜在アクションを学習し、代数的一貫性(合成・可逆性)を課すことで、VLAモデルの生成に適した構造化された潜在遷移を獲得する手法を提案した。

詳しい要約

1. どんなもの?

- 視覚-言語-行動(VLA)モデルにおける行動ラベル付きロボットデータの不足を、行動ラベルなしの動画から抽出した潜在行動モデルで補う研究。 - ALAM(Algebraically Consistent Latent Action Model)を提案。 - フレーム三つ組から再構成で接地されつつ、合成と反転の一貫性で正則化された潜在遷移を学習。 - 下流のVLA学習では、事前学習済みエンコーダを凍結し、その潜在遷移系列を補助生成ターゲットとしてロボット行動と共同でflow-matching目的で生成。 - これにより、潜在から行動へのデコーディングなしで、構造化された潜在遷移とflowベースのポリシー生成を結合。

2. 先行研究と比べてどこがすごい?

- 従来の潜在行動モデルは再構成訓練された潜在コードがポリシー生成に適さない可能性があった(将来観測を予測できても、再利用やロボット行動との整合生成に必要な構造を欠く)。 - ALAMは時間関係を構造的監督に変換し、局所的に加法性を持つ遷移空間を促す。 - 表現プローブで、非構造化潜在行動ベースラインと比べ加法性・可逆性エラーを25~85倍削減し、長期累積再構成を改善。 - VLAポリシーへの転移で、MetaWorld MT50の平均成功率を47.9%から85.0%に、LIBEROを94.1%から98.1%に向上。実世界操作タスクでも一貫した向上。

3. 技術・手法の肝は?

- フレーム三つ組を入力とし、再構成で接地された潜在遷移を学習。 - 合成一貫性と反転一貫性による正則化を導入し、局所的に加法性を持つ遷移空間を促す。 - 下流VLA学習では、事前学習済みエンコーダを凍結し、その潜在遷移系列を補助生成ターゲットとして使用。 - ロボット行動と潜在遷移をjoint flow-matching目的で共同生成。 - これにより、潜在から行動へのデコーディングを必要とせず、ALAMの局所一貫遷移幾何をポリシーが活用可能。

4. どうやって有効だと検証した?

- 表現プローブにより、加法性・可逆性エラーを非構造化潜在行動ベースライン比で25~85倍削減し、長期累積再構成を改善することを確認。 - VLAポリシーへの転移評価:MetaWorld MT50で平均成功率47.9%→85.0%、LIBEROで94.1%→98.1%。 - 実世界操作タスクでも一貫した向上を確認。 - アブレーションにより、代数的に構造化された潜在遷移とjoint flow matchingの相乗効果が最大の改善をもたらすことを確認。

5. 議論はある?

- アブレーションから、最も強い改善は代数的に構造化された潜在遷移とjoint flow matchingの相乗効果から生じることが確認されている。 - その他の議論や限界については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:非構造化潜在行動ベースライン(unstructured latent-action baselines)。 - 関連手法:VLAモデル、潜在行動モデル、flow-matching。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zuojin Tang, Haoyun Liu, Xinyuan Chang, Changjie Wu, Dongjie Huo, Yandan Yang, Bin Liu, Zhejia Cai, Feng Xiong, Mu Xu, jiachen Luo, De Ma, Zhiheng Ma, Gang Pan

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Vision-language-action (VLA) models remain constrained by the scarcity of action-labeled robot data, whereas action-free videos provide abundant evidence of how the physical world changes. Latent action models offer a promising way to extract such priors from videos, but reconstruction-trained latent codes are not necessarily suitable for policy generation: they may predict future observations while lacking the structure needed to be reused or generated coherently with robot actions. We introduce ALAM (Algebraic Latent Action Model), an Algebraically Consistent Latent Action Model that turns temporal relations in action-free video into structural supervision. Given frame triplets, ALAM learns latent transitions that are grounded by reconstruction while being regularized by composition and reversal consistency, encouraging a locally additive transition space. For downstream VLA learning, we freeze the pretrained encoder and use its latent transition sequences as auxiliary generative targets, co-generated with robot actions under a joint flow-matching objective. This couples structured latent transitions with flow-based policy generation, allowing the policy to exploit ALAM's locally consistent transition geometry without requiring latent-to-action decoding. Representation probes show that ALAM reduces additivity and reversibility errors by 25-85 times over unstructured latent-action baselines and improves long-horizon cumulative reconstruction. When transferred to VLA policies, ALAM raises the average success rate from 47.9% to 85.0% on MetaWorld MT50 and from 94.1% to 98.1% on LIBERO, with consistent gains on real-world manipulation tasks. Ablations further confirm that the strongest improvements arise from the synergy between algebraically structured latent transitions and joint flow matching.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI