日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

6D姿勢推定arXiv:2506.05719

一度だけ推定:ロボット把持のための統合・ワンステージ・リアルタイムカテゴリレベル関節物体6D姿勢推定

You Only Estimate Once: Unified, One-stage, Real-Time Category-level Articulated Object 6D Pose Estimation for Robotic Grasping

シェア:XThreadsFacebookLINEはてブBluesky

関節物体のカテゴリレベル6D姿勢推定を、インスタンス分割とNPCS表現を同時に出力する単一ステージのネットワークで実現し、200Hzのリアルタイム動作を可能にした研究。

詳しい要約

1. どんなもの?

- カテゴリレベルの articulated object の 6D pose 推定を目的とした研究 - ロボットマニピュレーション向けに、instance segmentation と NPCS 表現を単一ステージで end-to-end に出力する YOEO を提案 - ポイントクラウド上の点ごとに semantic label と centroid offset を予測し、同一 part instance の点を同一 centroid に投票させる - クラスタリングで点を識別し、各 instance の NPCS 領域を分離して実点群と整列し pose と size を復元 - 200Hz のリアルタイム視覚フィードバックで Kinova ロボットが未知の articulated object と相互作用

2. 先行研究と比べてどこがすごい?

- 既存手法は part instance の segmentation 後に NPCS 表現を推定する複雑な multi-stage pipeline - それらは計算コストが高く、リアルタイムのロボットタスクでは性能が低い - YOEO は単一ステージ・end-to-end で segmentation と NPCS を同時出力し、これらの制約を緩和 - 単発推定でありながら GAPart dataset で pose 推定能力を示す - 合成データで学習したモデルを実環境に展開し 200Hz のリアルタイム動作を実現

3. 技術・手法の肝は?

- 統一ネットワークで点ごとの semantic label と centroid offset を生成 - 同一 part instance の点が同一 centroid に投票する仕組み - 推定 centroid 距離に基づく clustering algorithm で点を識別 - 各 instance の NPCS 領域を分離し、実ポイントクラウドと整列して最終 pose と size を復元 - instance segmentation と NPCS 表現を単一ステージで end-to-end に同時出力する点が肝

4. どうやって有効だと検証した?

- GAPart dataset 上で提案する single-shot 手法の pose 推定能力を実験的に確認 - 合成データで学習したモデルを実世界設定に展開 - 200Hz のリアルタイム視覚フィードバックを提供 - 物理的な Kinova ロボットが未知の articulated object と相互作用できることを実証

5. 議論はある?

- 要旨からは不明 - ただし multi-stage pipeline の計算コストとリアルタイム性能の低さを動機として明示 - 合成学習モデルの実環境展開と 200Hz 動作の有効性を主張

6. 次に読むべき論文は?

- 要旨で直接参照/比較されている個別研究名は不明 - 関連手法として category-level articulated object の part pose/size 推定における multi-stage pipeline 系の先行研究 - NPCS (Normalized Part Coordinate Space) 表現を用いる手法 - GAPart dataset を用いる研究 - 同分野の定番として point cloud の instance segmentation 手法や clustering algorithm 関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jingshun Huang, Haitao Lin, Tianyu Wang, Yanwei Fu, Yu-Gang Jiang, Xiangyang Xue

分類: cs.CV, cs.RO

原文アブストラクト

This paper addresses the problem of category-level pose estimation for articulated objects in robotic manipulation tasks. Recent works have shown promising results in estimating part pose and size at the category level. However, these approaches primarily follow a complex multi-stage pipeline that first segments part instances in the point cloud and then estimates the Normalized Part Coordinate Space (NPCS) representation for 6D poses. These approaches suffer from high computational costs and low performance in real-time robotic tasks. To address these limitations, we propose YOEO, a single-stage method that simultaneously outputs instance segmentation and NPCS representations in an end-to-end manner. We use a unified network to generate point-wise semantic labels and centroid offsets, allowing points from the same part instance to vote for the same centroid. We further utilize a clustering algorithm to distinguish points based on their estimated centroid distances. Finally, we first separate the NPCS region of each instance. Then, we align the separated regions with the real point cloud to recover the final pose and size. Experimental results on the GAPart dataset demonstrate the pose estimation capabilities of our proposed single-shot method. We also deploy our synthetically-trained model in a real-world setting, providing real-time visual feedback at 200Hz, enabling a physical Kinova robot to interact with unseen articulated objects. This showcases the utility and effectiveness of our proposed method.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI