日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

プランニングarXiv:2606.07304

CAPE: 対照的アクション条件付き並列符号化による身体化プランニング

CAPE: Contrastive Action-conditioned Parallel Encoding for Embodied Planning

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの行動計画のため、アクション系列の将来結果を区別する対照学習を用いた視覚ダイナミクスモデルを提案し、実世界とシミュレーションで性能を向上させた。

詳しい要約

1. どんなもの?

- 身体性エージェントの計画のための視覚力学モデル - 行動候補の将来結果を予測する - 既存手法は再構成や密な潜在表現の展開 - CAPEは対照的行動条件付き並列エンコーディング - 異なる行動列が誘導する将来結果を区別して学習 - 初期観測と行動列から将来潜在軌道を1回の順伝播でデコード - Goal-Convergent Contrastive Objectiveで訓練 - 同じ将来結果の予測を近づけ、異なる結果を遠ざける

2. 先行研究と比べてどこがすごい?

- 既存の視覚力学モデルは将来の視覚状態を再構成 - または密な潜在表現をロールアウト - 視覚的に顕著だが計画に無関係な内容に学習容量を分散 - 行動条件付き変化に集中できない - CAPEは行動列が誘導する将来結果の区別に焦点 - 計画に関連する変化を捉える - 長い予測ホライズンで計画時推論コストを大幅削減 - 将来状態検索、オフライン行動マッチング、閉ループ計画で既存ベースラインを大幅に上回る

3. 技術・手法の肝は?

- Contrastive Action-conditioned Parallel Encodingフレームワーク - 初期観測と候補行動列を入力 - 将来潜在軌道全体を1回の順伝播でデコード - Goal-Convergent Contrastive Objectiveで訓練 - 同じ将来結果に対応する予測を整列 - 異なる結果に対応する予測を分離 - 行動条件付きの変化に学習を集中 - 並列エンコーディングにより効率的な推論を実現

4. どうやって有効だと検証した?

- 実世界DROIDデータセットで評価 - RoboCasaへのゼロショット転移で評価 - 将来状態検索タスクで評価 - オフライン行動マッチングタスクで評価 - 閉ループ計画タスクで評価 - 既存ベースラインと比較して大幅に優位 - 長い予測ホライズンで計画時推論コストを削減

5. 議論はある?

- 要旨からは不明 - 限界や失敗事例、計算コストの詳細、一般化可能性についての議論は記述されていない

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:既存の視覚力学モデル(再構成ベース、密な潜在表現ロールアウト) - 関連手法:Goal-Convergent Contrastive Objective、DROID、RoboCasa - 同分野の定番:Visual Dynamics Models、Model-Based Reinforcement Learning、Contrastive Learning for Planning

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Cong Chen, Haowen Wang, Zhixiang Zhang, Pei Ren, Zhengping Che

分類: cs.RO

原文アブストラクト

Embodied agents need to predict the future consequences of candidate actions in order to plan effectively before execution. Existing visual dynamics models learn by reconstructing future visual states or rolling out dense latent representations, which spreads learning capacity across visually salient but planning-irrelevant content rather than the action-conditioned changes that drive manipulation outcomes. We propose CAPE, a Contrastive Action-conditioned Parallel Encoding framework that learns visual dynamics by distinguishing the future outcomes induced by different action sequences. Given an initial observation and a candidate action sequence, CAPE decodes the full future latent trajectory in a single forward pass and is trained with a Goal-Convergent Contrastive Objective that aligns predictions corresponding to the same future outcome while separating those corresponding to different outcomes. On real-world DROID and zero-shot transfer to RoboCasa, CAPE substantially outperforms prior baselines on future-state retrieval, offline action matching, and closed-loop planning, while notably reducing planning-time inference cost at long prediction horizons.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI