日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

姿勢推定arXiv:2604.02759

OMNI-PoseX: 身体化タスクのための高速6D物体姿勢推定ビジョンモデル

OMNI-PoseX: A Fast Vision Model for 6D Object Pose Estimation in Embodied Tasks

シェア:XThreadsFacebookLINEはてブBluesky

オープンワールドで動作する6D物体姿勢推定の基盤モデルを提案し、オープンボキャブラリ認識とSO(3)対応の反射フローマッチングを統合した新規アーキテクチャにより、高精度かつリアルタイムな姿勢推定を実現した。

詳しい要約

1. どんなもの?

- 6D object pose estimation のための vision foundation model。 - 名称は OMNI-PoseX。 - open-vocabulary perception と SO(3)-aware reflected flow matching を統合した新規ネットワーク。 - embodied agents の open-world 環境での利用を想定。 - リアルタイム性と幾何一貫性を重視。

2. 先行研究と比べてどこがすごい?

- 既存手法は closed-set 前提や geometry-agnostic な回帰に依存。 - そのため generalization, stability, real-time 適用性が制限されていた。 - OMNI-PoseX は open-vocabulary 知覚と SO(3)-aware な回帰を統合。 - これにより SOTA 精度とリアルタイム効率を両立。 - 未見物体への grasping も可能に。

3. 技術・手法の肝は?

- 新規ネットワークで open-vocabulary perception と SO(3)-aware reflected flow matching を統合。 - object-level understanding と geometry-consistent rotation inference を分離。 - lightweight multi-modal fusion を採用。 - rotation-sensitive geometric features を compact semantic embeddings で条件付け。 - 大規模 6D pose データセットで学習し、open-world pose backbone を構築。

4. どうやって有効だと検証した?

- benchmark pose estimation で評価。 - ablation studies を実施。 - zero-shot generalization を検証。 - system-level robotic grasping integration で評価。 - SOTA 精度、リアルタイム効率、幾何一貫性、未見物体 grasping を確認。

5. 議論はある?

- 要旨からは不明。 - 具体的な限界や失敗事例、計算コストの詳細には言及なし。 - 議論の項目は要旨に記載なし。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として open-vocabulary perception, SO(3)-aware reflected flow matching, 6D pose estimation の既存研究が挙げられる。 - 同分野の定番として PoseCNN, PVNet, FoundationPose などが考えられるが、要旨に記載なし。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Michael Zhang, Wei Ying, Fangwen Chen, Shifeng Bai, Hanwen Kang

分類: cs.RO

原文アブストラクト

Accurate 6D object pose estimation is a fundamental capability for embodied agents, yet remains highly challenging in open-world environments. Many existing methods often rely on closed-set assumptions or geometry-agnostic regression schemes, limiting their generalization, stability, and real-time applicability in robotic systems. We present OMNI-PoseX, a vision foundation model that introduces a novel network architecture unifying open-vocabulary perception with an SO(3)-aware reflected flow matching pose predictor. The architecture decouples object-level understanding from geometry-consistent rotation inference, and employs a lightweight multi-modal fusion strategy that conditions rotation-sensitive geometric features on compact semantic embeddings, enabling efficient and stable 6D pose estimation. To enhance robustness and generalization, the model is trained on large-scale 6D pose datasets, leveraging broad object diversity, viewpoint variation, and scene complexity to build a scalable open-world pose backbone. Comprehensive evaluations across benchmark pose estimation, ablation studies, zero-shot generalization, and system-level robotic grasping integration demonstrate the effectiveness of OMNI-PoseX. The OMNI-PoseX achieves SOTA pose accuracy and real-time efficiency, while delivering geometrically consistent predictions that enable reliable grasping of diverse, previously unseen objects.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI