日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

把握合成arXiv:2603.08021

AffordGrasp: アフォーダンスを考慮した把握合成のためのクロスモーダル拡散

AffordGrasp: Cross-Modal Diffusion for Affordance-Aware Grasp Synthesis

シェア:XThreadsFacebookLINEはてブBluesky

物体の形状とユーザー指定の操作意図に合う人間の把握姿勢を生成する拡散ベースのフレームワークを提案。自動アノテーションでデータを拡充し、アフォーダンス表現と二重条件付け拡散で物理的安定性と意味的一貫性を両立した。

詳しい要約

1. どんなもの?

- どんなもの? - 3Dオブジェクトとテキスト指示から人間の grasping pose を生成する diffusion-based framework。 - 物理的に安定で意味的に忠実な grasp を高精度に合成する。 - AR/VR や embodied AI での hand-object interaction に応用可能。

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 既存の semantic grasping 手法は 3D 表現とテキストの modality gap が大きく、空間的・意味的制約が不足しがち。 - AffordGrasp は affordance-aware latent representation と dual-conditioning diffusion で geometry, spatial affordances, instruction semantics を統合。 - 4つの benchmark で grasp quality, semantic accuracy, diversity が大幅改善。

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - scalable annotation pipeline で hand-object interaction データセットに fine-grained structured language labels を自動付与。 - affordance-aware latent representation と dual-conditioning diffusion process を統合。 - distribution adjustment module で physical contact consistency と semantic alignment を強制。

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - HO-3D, OakInk, GRAB, AffordPose から派生した4つの instruction-augmented benchmarks で評価。 - state-of-the-art 手法と比較し、grasp quality, semantic accuracy, diversity で大幅改善を観測。

5. 議論はある?

- 議論はある? - 要旨からは不明。

6. 次に読むべき論文は?

- 次に読むべき論文は? - HO-3D, OakInk, GRAB, AffordPose を基盤とした研究。 - semantic grasping や diffusion-based grasp synthesis の関連手法。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiaofei Wu, Yi Zhang, Yumeng Liu, Yuexin Ma, Yujiao Shi, Xuming He

分類: cs.RO, cs.CV

原文アブストラクト

Generating human grasping poses that accurately reflect both object geometry and user-specified interaction semantics is essential for natural hand-object interactions in AR/VR and embodied AI. However, existing semantic grasping approaches struggle with the large modality gap between 3D object representations and textual instructions, and often lack explicit spatial or semantic constraints, leading to physically invalid or semantically inconsistent grasps. In this work, we present AffordGrasp, a diffusion-based framework that produces physically stable and semantically faithful human grasps with high precision. We first introduce a scalable annotation pipeline that automatically enriches hand-object interaction datasets with fine-grained structured language labels capturing interaction intent. Building upon these annotations, AffordGrasp integrates an affordance-aware latent representation of hand poses with a dual-conditioning diffusion process, enabling the model to jointly reason over object geometry, spatial affordances, and instruction semantics. A distribution adjustment module further enforces physical contact consistency and semantic alignment. We evaluate AffordGrasp across four instruction-augmented benchmarks derived from HO-3D, OakInk, GRAB, and AffordPose, and observe substantial improvements over state-of-the-art methods in grasp quality, semantic accuracy, and diversity.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI