日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2601.05499

TOSC: 部分点群からのオープンワールド巧みな把持生成のためのタスク指向形状補完

TOSC: Task-Oriented Shape Completion for Open-World Dexterous Grasp Generation from Partial Point Clouds

シェア:XThreadsFacebookLINEはてブBluesky

部分的な点群から、下流の操作タスクに必要な接触領域だけを補完し、巧みな把持を生成する手法を提案。

詳しい要約

1. どんなもの?

- タスク指向の器用な把持生成のための新しいタスク「Task-Oriented Shape Completion」を提案。 - 部分点群から、物体全体ではなく把持に必要な接触領域を補完する。 - 補完候補を生成し、評価・最適化した後、FlowGraspで把持を生成する。 - 深刻なデータ欠損下での把持性能を向上させる。

2. 先行研究と比べてどこがすごい?

- 従来の形状補完は物体全体を対象とし、部分観測下では汎用補完が無効になりがち。 - 本研究は下流の操作タスクに明示的に導かれた補完を行う点が新しい。 - タスク指向把持と形状補完の両方でSOTAを達成。 - Grasp Displacementを16.17%、Chamfer Distanceを55.26%改善。 - 深刻な欠損データやオープンセットカテゴリ・タスクへの汎化性も示す。

3. 技術・手法の肝は?

- 複数の事前学習済み基盤モデルによるゼロショットの物体機能理解を活用し、タスク指向形状補完候補を複数生成。 - 3D識別オートエンコーダを提案し、各候補の妥当性を評価し、大域的に最も妥当なものを最適化。 - 条件付きフローマッチングモデル「FlowGrasp」を開発し、最適化された形状からタスク指向の器用な把持を生成。

4. どうやって有効だと検証した?

- タスク指向の器用な把持とタスク指向形状補完の両方で最先端性能を達成。 - Grasp DisplacementとChamfer Distanceの改善率を報告。 - 深刻なデータ欠損がある物体の把持において良好な能力を示す。 - オープンセットカテゴリとタスクへの汎化性を実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、形状補完(例:Point Completion Network, PCN)、把持生成(例:GraspNet, 6-DOF GraspNet)、フローマッチング(例:Conditional Flow Matching)などが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Weishang Wu, Yifei Shi, Zhiping Cai

分類: cs.RO

原文アブストラクト

Task-oriented dexterous grasping remains challenging in robotic manipulations of open-world objects under severe partial observation, where significant missing data invalidates generic shape completion. In this paper, to overcome this limitation, we study Task-Oriented Shape Completion, a new task that focuses on completing the potential contact regions rather than the entire shape. We argue that shape completion for grasping should be explicitly guided by the downstream manipulation task. To achieve this, we first generate multiple task-oriented shape completion candidates by leveraging the zero-shot capabilities of object functional understanding from several pre-trained foundation models. A 3D discriminative autoencoder is then proposed to evaluate the plausibility of each generated candidate and optimize the most plausible one from a global perspective. A conditional flow-matching model named FlowGrasp is developed to generate task-oriented dexterous grasps from the optimized shape. Our method achieves state-of-the-art performance in task-oriented dexterous grasping and task-oriented shape completion, improving the Grasp Displacement and the Chamfer Distance over the state-of-the-art by 16.17\% and 55.26%, respectively. In particular, it shows good capabilities in grasping objects with severe missing data. It also demonstrates good generality in handling open-set categories and tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI