日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2509.18676

3Dフロー拡散ポリシー:3D空間でのフロー生成による視覚運動ポリシー学習

3D Flow Diffusion Policy: Visuomotor Policy Learning via Generating Flow in 3D Space

シェア:XThreadsFacebookLINEはてブBluesky

シーン全体の3Dフローを中間表現として用い、サンプル点の軌道予測と行動生成を統合した拡散モデルにより、接触の多い操作タスクで高い汎化性能を実現した研究。

詳しい要約

1. どんなもの?

- 3D Flow Diffusion Policy (3D FDP) という新規フレームワーク - ロボットマニピュレーションのための visuomotor policy learning 手法 - scene-level 3D flow を中間表現として用いる - サンプリングした query points の時間的軌跡を予測 - その interaction-aware flows を条件に action generation を行う - 単一の diffusion architecture 内で統合的に実装 - 局所的な動きの手がかりを捉え、接触の多い操作を精密に行うことを狙う

2. 先行研究と比べてどこがすごい?

- 既存手法は observation-to-action の直接写像か、知覚入力を global/object-centric 特徴に圧縮 - それらは精密・contact-rich な操作に重要な局所的運動手がかりを見落としがち - 3D FDP は scene-level 3D flow を構造化中間表現として用いる点が新しい - 局所的ダイナミクスに操作を接地させつつ、行動のより広い scene-level 影響も推論可能 - MetaWorld benchmark の 50 タスクで state-of-the-art、特に medium/hard 設定で優れる - 実ロボット 8 タスクでも contact-rich・non-prehensile 場面で prior baselines を一貫して上回る

3. 技術・手法の肝は?

- scene-level 3D flow を構造化中間表現として利用 - サンプリングした query points の temporal trajectories を予測 - 予測された interaction-aware flows を条件として action generation を実行 - flow 予測と action 生成を unified diffusion architecture 内で jointly に実装 - これにより局所的ダイナミクスへの接地と scene-level の帰結推論を両立 - 詳細な architecture 構成や損失設計は要旨からは不明

4. どうやって有効だと検証した?

- MetaWorld benchmark 上で 50 タスクを評価 - medium および hard 設定で特に高い性能を達成し state-of-the-art と報告 - シミュレーションに加え実ロボット 8 タスクで検証 - contact-rich および non-prehensile シナリオで prior baselines を一貫して上回る - robot demonstrations・追加結果・コードをプロジェクトページで公開 - 具体的な比較手法名や評価指標の詳細は要旨からは不明

5. 議論はある?

- 3D flow が generalizable visuomotor policies 学習の強力な structural prior であると主張 - より robust で versatile なロボットマニピュレーション開発に寄与すると述べる - 限界・失敗事例・計算コスト・実環境での汎化範囲についての議論は要旨からは不明 - 比較対象の prior baselines の具体的名称も要旨からは不明

6. 次に読むべき論文は?

- diffusion policy 系の visuomotor policy learning 研究 - 3D flow / scene flow を表現学習に用いるロボティクス研究 - MetaWorld benchmark を用いた manipulation の汎化研究 - contact-rich・non-prehensile manipulation の policy learning 研究 - 要旨で参照・比較されている個別研究名は明示されていないため、上記は同分野の定番カテゴリ

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sangjun Noh, Dongwoo Nam, Kangmin Kim, Geonhyup Lee, Yeonguk Yu, Raeyoung Kang, Kyoobin Lee

分類: cs.RO, cs.SY, eess.SY

原文アブストラクト

Learning robust visuomotor policies that generalize across diverse objects and interaction dynamics remains a central challenge in robotic manipulation. Most existing approaches rely on direct observation-to-action mappings or compress perceptual inputs into global or object-centric features, which often overlook localized motion cues critical for precise and contact-rich manipulation. We present 3D Flow Diffusion Policy (3D FDP), a novel framework that leverages scene-level 3D flow as a structured intermediate representation to capture fine-grained local motion cues. Our approach predicts the temporal trajectories of sampled query points and conditions action generation on these interaction-aware flows, implemented jointly within a unified diffusion architecture. This design grounds manipulation in localized dynamics while enabling the policy to reason about broader scene-level consequences of actions. Extensive experiments on the MetaWorld benchmark show that 3D FDP achieves state-of-the-art performance across 50 tasks, particularly excelling on medium and hard settings. Beyond simulation, we validate our method on eight real-robot tasks, where it consistently outperforms prior baselines in contact-rich and non-prehensile scenarios. These results highlight 3D flow as a powerful structural prior for learning generalizable visuomotor policies, supporting the development of more robust and versatile robotic manipulation. Robot demonstrations, additional results, and code can be found at https://sites.google.com/view/3dfdp/home.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI