日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.06878

頑健な6自由度把握姿勢推定のためのクロスビュー融合フレームワーク

A Cross-view Fusion Framework for Robust 6-DoF Grasp Pose Estimation

シェア:XThreadsFacebookLINEはてブBluesky

本論文では、コーナービューでの6自由度把握姿勢推定の頑健性を高めるため、補助ビューを統合し、自己教師あり対比学習と円筒座標系での融合モジュールを用いたクロスビュー融合フレームワークを提案する。

詳しい要約

1. どんなもの?

- 6-DoF grasp pose estimation を corner views で頑健化する cross-view fusion framework を提案 - auxiliary view を導入して occlusion を緩和 - post-fusion strategy により task-agnostic な multi-view reconstruction を回避 - self-supervised contrastive learning で cross-view の point cloud features を正則化 - cross-view-aligned cylinder integration module で grasp-relevant geometry を統合 - GraspNet-1Billion benchmark と実世界応用で高性能

2. 先行研究と比べてどこがすごい?

- 従来は multi-view reconstruction が時間消費的で task-agnostic - 本手法は post-fusion strategy で再構成を避ける - auxiliary view で occlusion を緩和し corner views の頑健性を向上 - self-supervised contrastive learning で cross-view の空間一貫性と方向識別性を強化 - 先行研究との具体的比較は要旨からは不明

3. 技術・手法の肝は?

- cross-view fusion framework - auxiliary view の導入 - post-fusion strategy - self-supervised contrastive learning - cross-view point pair が同一3D位置なら match、異なる grasp direction なら non-match - cross-view-aligned cylinder integration module - cross-view points/features を類似度で align - cylindrical coordinate frame に登録し回転対称幾何を強調 - local self-attention と seed cross-attention を交互に適用

4. どうやって有効だと検証した?

- GraspNet-1Billion benchmark で strong performance - 実世界アプリケーションで有効性を確認 - 具体的な評価指標や比較手法は要旨からは不明

5. 議論はある?

- 要旨からは不明 - 限界や失敗事例、計算コストの議論は記載なし

6. 次に読むべき論文は?

- GraspNet-1Billion benchmark 関連論文 - 6-DoF grasp pose estimation の先行研究 - multi-view reconstruction を用いる手法 - contrastive learning を用いた point cloud 表現学習 - 具体的な参照論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kangjian Zhu, Haobo Jiang, Jianjun Qian, Jin Xie

分類: cs.RO, cs.CV

原文アブストラクト

In this paper, we propose a cross-view fusion framework that enhances the robustness of 6-DoF grasp pose estimation in corner views. Our framework alleviates occlusion by incorporating an auxiliary view and avoids the time-consuming, task-agnostic multi-view reconstruction through a post-fusion strategy. To enhance cross-view fusion, we propose a self-supervised contrastive learning strategy that leverages cross-view associations to regularize point cloud features. In brief, a cross-view point pair is considered a match if the two points correspond to the same 3D location, and a non-match if they represent distinct grasp directions. The learning strategy significantly enhances the spatial consistency and direction distinctiveness of point features, thereby facilitating cross-view fusion and improving estimation robustness. Furthermore, we propose a cross-view-aligned cylinder integration module to fuse grasp-relevant geometry into a comprehensive representation. Specifically, the module first aligns the cross-view points and features according to their similarity to enhance the robustness against noise. Subsequently, these points are registered into the cylindrical coordinate frame, emphasizing the rotation-symmetric geometry which is important for grasping. Finally, local self-attention and seed cross-attention layers are alternately employed, respectively enabling interactions within single views and across views, which supports fine-grained representation of grasp-relevant geometry. Our framework achieves strong performance on the GraspNet-1Billion benchmark and in real-world applications. Code is available at https://github.com/KJZhuAutomatic/Cross-view-Grasp.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI