日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2610.16969

UniLAP:クロスエンボディメント操作のための統合潜在行動ポリシー

UniLAP: A Unified Latent Action Policy for Cross-Embodiment Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

流れマッチングで連続潜在行動をモデル化し、外観に依存しない運動表現を抽出することで、多様なロボット形態に適応可能な操作ポリシーを実現した。

詳しい要約

1. どんなもの?

- 提案手法: UniLAP - 連続潜在行動ポリシー - flow matchingで潜在空間をモデル化 - 推論時に未来フレーム不要 - 目的: クロスエンボディメント操作 - 多様なロボットプラットフォームへの適応 - 事前学習: マルチソース動画 - 1.1Bパラメータ - 応用: 手姿勢予測、単腕・ヒューマノイド操作、実世界展開

2. 先行研究と比べてどこがすごい?

- 先行研究: Latent Action Models (LAMs) - 離散潜在: 粒度ボトルネック - 連続潜在: 世界モデリングの代理で計画必要 - UniLAPの優位性: - 連続潜在行動ポリシーを統合 - 推論時に未来フレーム不要 - マルチモーダル分布を保持 - 外観に依存しない運動表現 - 新規プラットフォームへ容易に適応 - 性能: 最先端のlatent-actionおよびVLAベースラインを上回る

3. 技術・手法の肝は?

- 技術の肝: - flow matchingで連続潜在空間をモデル化 - flow-adaptive目的でLAM teacherを蒸留 - ラベルフリー運動ターゲット抽出 - タスク無関係な外観から運動キューを分離 - embodiment-agnostic潜在多様体の構築 - 推論: 未来フレームに依存せず実行可能行動を生成

4. どうやって有効だと検証した?

- 検証タスク: - 手姿勢予測 - 単腕操作 - ヒューマノイド操作 - 実世界展開 - 比較: 最先端のlatent-actionおよびVLAベースライン - 結果: すべてで上回る

5. 議論はある?

- 議論点: - 離散潜在の粒度ボトルネック - 連続潜在の計画ステップ問題 - 外観と運動の分離 - クロスエンボディメント適応 - 限界や課題: 要旨からは不明

6. 次に読むべき論文は?

- 関連研究: - Latent Action Models (LAMs) - Vision-Language-Action (VLA) ベースライン - flow matching - 蒸留 - 同分野の定番: ロボット操作のための模倣学習、強化学習、クロスエンボディメント学習

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Lei Yao, Qiao Feng, Mutian Tong, Qihao Yun, Lap-Pui Chau, Lingjie Liu

分類: cs.RO, cs.CV

原文アブストラクト

Latent Action Models (LAMs) can capture manipulation priors from action-free videos, but discrete latents usually impose a granularity bottleneck, limiting their ability to represent fine-grained action. Recent continuous alternatives mitigate this, but they are typically used as proxies for world modeling and require a further planning step to produce executable actions. We thus introduce UniLAP, a unified continuous latent-action policy that models the latent space via flow matching and bypasses reliance on future frames during inference. By distilling a LAM teacher with a flow-adaptive objective, UniLAP inherits the teacher's action representation while retaining the multimodal distribution of feasible behaviors. To decouple latent representations from task-irrelevant appearance, we extract a label-free motion target to isolate relevant kinematic cues from spurious visual dynamics. With the established embodiment-agnostic latent manifold, UniLAP can be easily adapted to novel platforms. Pretrained on multi-source videos at a compact 1.1B parameter scale, UniLAP outperforms state-of-the-art latent-action and Vision-Language-Action (VLA) baselines across hand pose forecasting, single-arm and humanoid manipulation, and real-world deployment.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI