動的ツリーカプセルネットワークによるアフォーダンス検出
Affordance detection with Dynamic-Tree Capsule Networks
3D点群から物体のアフォーダンスを検出するため、動的ツリー構造のカプセルネットワークを初めて提案し、未知物体や新視点に対する頑健性で従来手法を上回ることを示した。
著者: Antonio Rodríguez-Sánchez, Simon Haller-Seeber, David Peer, Chris Engelhardt, Jakob Mittelberger, Matteo Saveriano
分類: cs.CV, cs.RO
原文アブストラクト
Affordance detection from visual input is a fundamental step in autonomous robotic manipulation. Existing solutions to the problem of affordance detection rely on convolutional neural networks. However, these networks do not consider the spatial arrangement of the input data and miss parts-to-whole relationships. Therefore, they fall short when confronted with novel, previously unseen object instances or new viewpoints. One solution to overcome such limitations can be to resort to capsule networks. In this paper, we introduce the first affordance detection network based on dynamic tree-structured capsules for sparse 3D point clouds. We show that our capsule-based network outperforms current state-of-the-art models on viewpoint invariance and parts-segmentation of new object instances through a novel dataset we only used for evaluation and it is publicly available from github.com/gipfelen/DTCG-Net. In the experimental evaluation we will show that our algorithm is superior to current affordance detection methods when faced with grasping previously unseen objects thanks to our Capsule Network enforcing a parts-to-whole representation.
関連論文
- 確率的プロトタイプによる3D点群上の解釈可能なアフォーダンス検出アフォーダンス検出
- 知識蒸留とテキスト-点相関を用いたオープンボキャブラリ・アフォーダンス検出アフォーダンス検出
- 3D点群におけるオープンボキャブラリ・アフォーダンス検出アフォーダンス検出
- 一人称視点での幾何学駆動型ワンショット・アフォーダンス検出アフォーダンス検出
- 3D顕著性と幾何情報を活用した高速・スケーラブルな複数アフォーダンス検出アフォーダンス検出
- AffordanceNet:物体のアフォーダンス検出のためのエンドツーエンド深層学習手法アフォーダンス検出
