日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.11002

3D FlowMatch Actor:単腕・双腕マニピュレーションのための統合3Dポリシー

3D FlowMatch Actor: Unified 3D Policy for Single- and Dual-Arm Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

流れマッチングと3D事前学習済み視覚表現を組み合わせ、単腕・双腕ロボット操作を高速かつ高精度に行う3Dポリシーを提案。

詳しい要約

1. どんなもの?

- 3D FlowMatch Actor (3DFA) というロボットマニピュレーション向けの3Dポリシーアーキテクチャ - flow matching による軌道予測と、3D pretrained visual scene representations を組み合わせる - demonstration からの学習 (learning from demonstration) を対象 - single-arm と dual-arm の両方の manipulation を統一的に扱う - action denoising 中に action tokens と visual tokens の間の 3D relative attention を利用

2. 先行研究と比べてどこがすごい?

- 先行の 3D diffusion-based single-arm policy learning を土台に拡張 - flow matching とシステム/アーキテクチャ最適化により、先行の 3D diffusion-based policies 比で学習・推論が 30x 以上高速化 - 性能を犠牲にしないと主張 - bimanual PerAct2 benchmark で新たな state of the art、次善手法を 41.4% の絶対差で上回る - 実世界評価で、最大 1000x 多いパラメータとより多くの pretraining を持つ強力な baselines を上回る - unimanual では 74 の RLBench タスクで新たな state of the art

3. 技術・手法の肝は?

- flow matching による軌道予測を採用 - 3D pretrained visual scene representations を活用 - action denoising 時に action tokens と visual tokens 間の 3D relative attention を計算 - システムレベルおよびアーキテクチャ上の最適化を組み合わせて高速化 - unimanual 設定では dense end-effector trajectories を直接予測し、motion planning を不要にする

4. どうやって有効だと検証した?

- bimanual PerAct2 benchmark での評価 - 実世界での広範な評価 (strong baselines との比較) - unimanual 設定で 74 の RLBench タスクでの評価 - 設計選択の有効性と効率性に関する comprehensive ablation studies

5. 議論はある?

- 設計選択がポリシーの有効性と効率性の両方に重要であることを ablation で示す - 具体的な限界や失敗事例、議論の詳細は要旨からは不明

6. 次に読むべき論文は?

- 3D diffusion-based single-arm policy learning の先行研究 - PerAct2 benchmark に関する研究 - RLBench に関する研究 - flow matching を用いたポリシー学習の関連手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Nikolaos Gkanatsios, Jiahe Xu, Matthew Bronars, Arsalan Mousavian, Tsung-Wei Ke, Katerina Fragkiadaki

分類: cs.RO

原文アブストラクト

We present 3D FlowMatch Actor (3DFA), a 3D policy architecture for robot manipulation that combines flow matching for trajectory prediction with 3D pretrained visual scene representations for learning from demonstration. 3DFA leverages 3D relative attention between action and visual tokens during action denoising, building on prior work in 3D diffusion-based single-arm policy learning. Through a combination of flow matching and targeted system-level and architectural optimizations, 3DFA achieves over 30x faster training and inference than previous 3D diffusion-based policies, without sacrificing performance. On the bimanual PerAct2 benchmark, it establishes a new state of the art, outperforming the next-best method by an absolute margin of 41.4%. In extensive real-world evaluations, it surpasses strong baselines with up to 1000x more parameters and significantly more pretraining. In unimanual settings, it sets a new state of the art on 74 RLBench tasks by directly predicting dense end-effector trajectories, eliminating the need for motion planning. Comprehensive ablation studies underscore the importance of our design choices for both policy effectiveness and efficiency.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI