日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.23227

球面調和関数による効率的なハイブリッドSE(3)等変ビジュモータフローポリシー:ロボット操作への応用

Efficient Hybrid SE(3)-Equivariant Visuomotor Flow Policy via Spherical Harmonics for Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

球面調和表現を用いてSO(3)等変性を保証しつつ、点群と画像のハイブリッド視覚モダリティを動的に融合する特徴強調モジュールを導入し、高速サンプリングと安定した等変学習を両立するE3Flowを提案した。シミュレーションと実機で有効性を検証し、成功率と推論速度の向上を実証した。

詳しい要約

1. どんなもの?

- ロボットマニピュレーション向けの新フレームワーク E3Flow を提案。 - SE(3) 等変な visuomotor flow policy で、rectified flow と安定した多モーダル等変学習を初めて統合。 - spherical harmonic 表現に基づき厳密な SO(3) 等変性を確保。 - 点群と画像のハイブリッド視覚モダリティを融合する Feature Enhancement Module (FEM) を導入。 - MimicGen の 8 タスクと実世界 4 実験で評価。

2. 先行研究と比べてどこがすごい?

- 既存の等変手法は計算負荷が高く、単一モダリティ入力に依存し、高速サンプリング法との組み合わせで不安定。 - E3Flow はこれらを克服し、効率的な rectified flow と安定した多モーダル等変学習を初めて統合。 - 最先端の Spherical Diffusion Policy (SDP) に対し平均成功率 3.12% 向上しつつ、推論を 7 倍高速化。 - 性能・効率・データ効率の新たなトレードオフを実現。

3. 技術・手法の肝は?

- spherical harmonic 表現により厳密な SO(3) 等変性を保証。 - 効率的な rectified flow を等変拡散ポリシーに統合。 - 新規の invariant Feature Enhancement Module (FEM) が点群と画像のハイブリッド視覚モダリティを動的に融合。 - 球面調和特徴に豊富な視覚手がかりを注入。

4. どうやって有効だと検証した?

- MimicGen の 8 つのマニピュレーションタスクで評価。 - さらに実世界で 4 つの実験を実施し、物理環境での有効性を検証。 - シミュレーション結果で SDP 比 平均成功率 3.12% 向上、推論 7 倍高速化を確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- Spherical Diffusion Policy (SDP) - MimicGen - rectified flow - equivariant diffusion policy

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qinglun Zhang, Shen Cheng, Tian Dan, Haoqiang Fan, Guanghui Liu, Shuaicheng Liu

分類: cs.RO

原文アブストラクト

While existing equivariant methods enhance data efficiency, they suffer from high computational intensity, reliance on single-modality inputs, and instability when combined with fast-sampling methods. In this work, we propose E3Flow, a novel framework that addresses the critical limitations of equivariant diffusion policies. E3Flow overcomes these challenges, successfully unifying efficient rectified flow with stable, multi-modal equivariant learning for the first time. Our framework is built upon spherical harmonic representations to ensure rigorous SO(3) equivariance. We introduce a novel invariant Feature Enhancement Module (FEM) that dynamically fuses hybrid visual modalities (point clouds and images), injecting rich visual cues into the spherical harmonic features. We evaluate E3Flow on 8 manipulation tasks from the MimicGen and further conduct 4 real-world experiments to validate its effectiveness in physical environments. Simulation results show that E3Flow achieves a 3.12% improvement in average success rate over the state-of-the-art Spherical Diffusion Policy (SDP) while simultaneously delivering a 7x inference speedup. E3Flow thus demonstrates a new and highly effective trade-off between performance, efficiency, and data efficiency for robotic policy learning. Code: https://github.com/zql-kk/E3Flow.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI