日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2506.16201

FlowRAM: 領域認識Mambaフレームワークによるフローマッチング方策のロボットマニピュレーションへの基盤化

FlowRAM: Grounding Flow Matching Policy with Region-Aware Mamba Framework for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

拡散方策の推論効率と3D知覚の課題に対し、動的半径スケジュールと状態空間モデル、条件付きフローマッチングを組み合わせ、高精度マニピュレーションで成功率を12%向上させた。

詳しい要約

1. どんなもの?

- 高精度なロボットマニピュレーションのための新しいポリシー学習フレームワーク「FlowRAM」 - 生成モデルを用いた region-aware な知覚と効率的なマルチモーダル情報処理を目指す - 拡散ベース手法の推論時反復 denoising による低効率を課題として出発点に置く - 構成要素は Dynamic Radius Schedule、state space models、conditional flow matching - 3D 環境での情報探索を強化する generative model の活用を狙う - RLBench で評価され state-of-the-art を報告

2. 先行研究と比べてどこがすごい?

- 先行の diffusion-based policy learning は推論時の反復 denoising で計算効率が低い - FlowRAM は conditional flow matching で deterministic vector field を回帰し学習を簡素化 - 先行手法は 3D 環境での generative model による情報探索の可能性を十分に活かしていない - Dynamic Radius Schedule で global scene から fine-grained geometric details へ適応的に知覚 - state space models の統合により線形計算量を保ちつつマルチモーダル情報を処理 - 高精度タスクで先行手法より平均成功率 12.0% 改善と報告

3. 技術・手法の肝は?

- Dynamic Radius Schedule - 適応的な知覚半径制御により、全体把握から細部幾何への遷移を実現 - state space models の統合 - マルチモーダル情報を線形計算量で処理 - conditional flow matching - 行動ポーズを deterministic vector field の回帰として学習 - 反復 denoising を簡素化し推論効率を向上 - region-aware perception を generative model で実現する枠組み

4. どうやって有効だと検証した?

- RLBench 上で有効性を検証 - state-of-the-art 性能を達成と報告 - 高精度タスクで先行手法比 12.0% の平均成功率改善 - 実世界の多様なタスクで物理的に妥当な行動を 4 time steps 未満で生成 - 推論速度の大幅向上を示す - 詳細な実験設定・比較対象・被験者数などは要旨からは不明

5. 議論はある?

- 高精度タスクでの改善と推論高速化を主張 - ただし定量的な内訳や失敗事例の分析は要旨からは不明 - Dynamic Radius Schedule の設計感度や state space models の寄与度は要旨からは不明 - 実世界タスクの評価規模・多様性・安全性の議論は要旨からは不明 - diffusion 系との公平な計算量比較の詳細は要旨からは不明

6. 次に読むべき論文は?

- diffusion-based policy learning の代表的手法(Diffusion Policy など) - conditional flow matching に関する原論文・関連研究 - state space models(Mamba 系)のロボティクス応用研究 - RLBench を用いた manipulation ベンチマーク論文 - region-aware / 3D perception を用いたポリシー学習の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sen Wang, Le Wang, Sanping Zhou, Jingyi Tian, Jiayi Li, Haowen Sun, Wei Tang

分類: cs.RO, cs.CV

原文アブストラクト

Robotic manipulation in high-precision tasks is essential for numerous industrial and real-world applications where accuracy and speed are required. Yet current diffusion-based policy learning methods generally suffer from low computational efficiency due to the iterative denoising process during inference. Moreover, these methods do not fully explore the potential of generative models for enhancing information exploration in 3D environments. In response, we propose FlowRAM, a novel framework that leverages generative models to achieve region-aware perception, enabling efficient multimodal information processing. Specifically, we devise a Dynamic Radius Schedule, which allows adaptive perception, facilitating transitions from global scene comprehension to fine-grained geometric details. Furthermore, we integrate state space models to integrate multimodal information, while preserving linear computational complexity. In addition, we employ conditional flow matching to learn action poses by regressing deterministic vector fields, simplifying the learning process while maintaining performance. We verify the effectiveness of the FlowRAM in the RLBench, an established manipulation benchmark, and achieve state-of-the-art performance. The results demonstrate that FlowRAM achieves a remarkable improvement, particularly in high-precision tasks, where it outperforms previous methods by 12.0% in average success rate. Additionally, FlowRAM is able to generate physically plausible actions for a variety of real-world tasks in less than 4 time steps, significantly increasing inference speed.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI