日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.08896

人間らしい事前知識を活用したアフォーダンス認識型ロボット巧み把持

Towards Affordance-Aware Robotic Dexterous Grasping with Human-like Priors

シェア:XThreadsFacebookLINEはてブBluesky

人間の手の動きを模倣した事前学習と、機能的に不適切な接触領域を避けるアフォーダンス認識モジュールを組み合わせ、自然で汎用的な巧み把持を実現するフレームワークAffordDexを提案。

詳しい要約

1. どんなもの?

- ロボットの多指dexterous handによる汎用的な物体把持を目指すフレームワーク「AffordDex」の提案。 - 単なる把持安定性ではなく、affordance-awareな接触位置とhuman-likeな姿勢を重視。 - 下流のmanipulationに資する把持を実現することを狙う。 - two-stage trainingで、motion priorsとobject affordancesの両方を内在的に理解するuniversal grasping policyを学習。

2. 先行研究と比べてどこがすごい?

- 従来手法はlow-levelなgrasp stability指標に偏り、affordance-aware positioningやhuman-like posesを軽視していたと指摘。 - AffordDexはmotion priorsとobject affordancesの両方を統合的に扱う点が新しい。 - 結果としてseen objects、unseen instances、全くのnovel categoriesでstate-of-the-art baselinesを大きく上回ると報告。

3. 技術・手法の肝は?

- two-stage trainingを採用。 - 第1段階: 大規模なhuman hand motionsのコーパスでtrajectory imitatorを事前学習し、自然な動きの強いpriorを獲得。 - 第2段階: residual moduleを学習し、一般的なhuman-like motionを個別物体に適応。 - Negative Affordance-aware Segmentation (NAA) moduleが機能的に不適切な接触領域を特定。 - privileged teacher-student distillationにより、最終的なvision-based policyの成功率を高める。

4. どうやって有効だと検証した?

- Extensive experimentsを実施。 - seen objects、unseen instances、entirely novel categoriesの各設定で評価。 - AffordDexはuniversal dexterous graspingを達成しつつ、姿勢がhuman-likeで接触位置が機能的に適切であることを示す。 - state-of-the-art baselinesを有意に上回る性能を確認。

5. 議論はある?

- 要旨からは不明。 - 明示されているのは、affordance-aware positioningとhuman-like posesの重要性、およびtwo-stage trainingとNAA・distillationの有効性。 - 限界や失敗事例、計算コスト、実機展開の議論については要旨に記載なし。

6. 次に読むべき論文は?

- trajectory imitatorの事前学習に関わるhuman hand motion imitation研究。 - Negative Affordance-aware Segmentation (NAA) に関連するaffordance segmentation研究。 - privileged teacher-student distillationを用いるvision-based policy学習研究。 - dexterous graspingのstate-of-the-art baselines(具体的名称は要旨からは不明)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haoyu Zhao, Linghao Zhuang, Xingyue Zhao, Cheng Zeng, Haoran Xu, Yuming Jiang, Jun Cen, Kexiang Wang, Jiayan Guo, Siteng Huang, Xin Li, Deli Zhao, Hua Zou

分類: cs.RO

原文アブストラクト

A dexterous hand capable of generalizable grasping objects is fundamental for the development of general-purpose embodied AI. However, previous methods focus narrowly on low-level grasp stability metrics, neglecting affordance-aware positioning and human-like poses which are crucial for downstream manipulation. To address these limitations, we propose AffordDex, a novel framework with two-stage training that learns a universal grasping policy with an inherent understanding of both motion priors and object affordances. In the first stage, a trajectory imitator is pre-trained on a large corpus of human hand motions to instill a strong prior for natural movement. In the second stage, a residual module is trained to adapt these general human-like motions to specific object instances. This refinement is critically guided by two components: our Negative Affordance-aware Segmentation (NAA) module, which identifies functionally inappropriate contact regions, and a privileged teacher-student distillation process that ensures the final vision-based policy is highly successful. Extensive experiments demonstrate that AffordDex not only achieves universal dexterous grasping but also remains remarkably human-like in posture and functionally appropriate in contact location. As a result, AffordDex significantly outperforms state-of-the-art baselines across seen objects, unseen instances, and even entirely novel categories.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI