日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

拡散ポリシー/ロボット操作arXiv:2609.06615

MemCorr-DP: 参照軌道に基づく反事実対応条件付けを用いた拡散ポリシー

MemCorr-DP: Counterfactual Correspondence Conditioning for a Diffusion Policy Guided by a Reference

シェア:XThreadsFacebookLINEはてブBluesky

物体位置とカメラ視点が同時に変化する状況でロバストな視覚運動ポリシーを実現するため、参照軌道との3次元対応関係を明示的に利用する拡散ポリシーを提案した。

詳しい要約

1. どんなもの?

MemCorr-DPは、参照軌跡(reference trajectory)を利用した拡散ポリシー(diffusion policy)であり、物体位置とカメラ視点が同時に変化する状況下でのロボット操作の堅牢性を高める手法。凍結したRoMa v2マッチを現在のシーンと参照軌跡の間の明示的な3D関係に変換し、カウンターファクチュアルなペア目的関数と混合条件ファインチューニングを用いて、参照に応じた条件付けを実現する。

2. 先行研究と比べてどこがすごい?

従来のBehavior Cloningによる視覚運動ポリシーは訓練分布付近では正確だが、物体位置とカメラ視点が同時に変わると失敗する。MemCorr-DPは、参照軌跡の幾何学的情報を現在のシーンに整合させ、ノイズ除去中も参照に敏感に保つ点で優れる。また、同じアクションアーキテクチャの視覚Transformerと比較して、複合的なシフト下で高い成功率を達成している。

3. 技術・手法の肝は?

手法の核は、(1)凍結RoMa v2マッチを現在のシーンと参照軌跡の間の明示的な3D関係に持ち上げること、(2)同じ物理状態とノイズアクションに異なる行動を割り当てるカウンターファクチュアルなペア目的関数を導入しつつ、参照固有のノイズ除去ターゲットを保持すること、(3)混合条件ファインチューニングにより、真値の幾何学から測定された対応誤差へ適応すること。

4. どうやって有効だと検証した?

最も強い評価として、ドアを訓練サポート外の最外位置帯に置き、クエリカメラを±15度変更する複合シフトを実施。この条件下でMemCorr-DPは96.67%の閉ループ成功率を達成し、同じアクションアーキテクチャの視覚Transformerの88.00%を上回った。また、目的関数のアブレーションと参照介入により、行動が選択した参照に応答すること、完全な関係セットが将来の動きや重心幾何学のみよりも優れていることを示した。

5. 議論はある?

要旨からは、手法の限界や一般化に関する議論は不明。ただし、評価タスクは特定のドア操作に限定されており、他のタスクやより大きな視点変化への一般性は未検証である可能性が示唆される。また、RoMa v2の凍結やカウンターファクチュアル目的の理論的裏付けなど、詳細な議論は要旨には含まれていない。

6. 次に読むべき論文は?

要旨で参照されているRoMa v2に関する論文、および拡散ポリシー(diffusion policy)の基礎論文、Behavior Cloningを用いた視覚運動ポリシーに関する研究が関連する。具体的には、RoMa v2の原著論文と、拡散ポリシーを提案した論文(例: Diffusion Policy by Chi et al.)が次に読むべき候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tan Su, Haoxiang Yang, Ruxin Wang, Binghui Xie

分類: cs.RO, cs.AI

原文アブストラクト

Behavior-cloned visuomotor policies can remain accurate near their training distribution yet fail when object position and camera viewpoint change together. A successful reference trajectory contains the geometry needed to transfer the same interaction, but the policy must align that geometry with the current scene and remain sensitive to it during denoising. To address these challenges, we present MemCorr-DP, a diffusion policy that lifts frozen RoMa v2 matches into explicit 3D relations between the current scene and the reference trajectory. A counterfactual paired objective assigns opposite behaviors the same physical state and noisy action while retaining reference-specific denoising targets. Mixed-condition fine-tuning then adapts the policy from ground-truth geometry to measured correspondence errors. Our strongest evaluation places the Door in the outermost position bands beyond the training support and changes the query camera by $\pm15^\circ$. Under this combined shift, MemCorr-DP achieves 96.67% closed-loop success, compared with 88.00% for a visual Transformer with the same action architecture. Objective ablations and reference interventions show that behavior responds to the selected reference, while matched controls favor the complete relation set over future motion or centroid geometry alone. These results support explicit 3D reference relations as a robust conditioning interface when spatial and viewpoint changes are compounded in the evaluated task.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI