確率的プロトタイプによる3D点群上の解釈可能なアフォーダンス検出
Interpretable Affordance Detection on 3D Point Clouds with Probabilistic Prototypes
3D点群のアフォーダンス検出にプロトタイプ学習を適用し、ブラックボックスモデルと同等の性能を保ちつつ「これはあれに似ている」という事例ベースの解釈可能性を実現した。
著者: Maximilian Xiling Li, Korbinian Rudolf, Nils Blank, Rudolf Lioutikov
分類: cs.CV, cs.RO
原文アブストラクト
Robotic agents need to understand how to interact with objects in their environment, both autonomously and during human-robot interactions. Affordance detection on 3D point clouds, which identifies object regions that allow specific interactions, has traditionally relied on deep learning models like PointNet++, DGCNN, or PointTransformerV3. However, these models operate as black boxes, offering no insight into their decision-making processes. Prototypical Learning methods, such as ProtoPNet, provide an interpretable alternative to black-box models by employing a "this looks like that" case-based reasoning approach. However, they have been primarily applied to image-based tasks. In this work, we apply prototypical learning to models for affordance detection on 3D point clouds. Experiments on the 3D-AffordanceNet benchmark dataset show that prototypical models achieve competitive performance with state-of-the-art black-box models and offer inherent interpretability. This makes prototypical models a promising candidate for human-robot interaction scenarios that require increased trust and safety.
関連論文
- 知識蒸留とテキスト-点相関を用いたオープンボキャブラリ・アフォーダンス検出アフォーダンス検出
- 3D点群におけるオープンボキャブラリ・アフォーダンス検出アフォーダンス検出
- 動的ツリーカプセルネットワークによるアフォーダンス検出アフォーダンス検出
- 一人称視点での幾何学駆動型ワンショット・アフォーダンス検出アフォーダンス検出
- 3D顕著性と幾何情報を活用した高速・スケーラブルな複数アフォーダンス検出アフォーダンス検出
- AffordanceNet:物体のアフォーダンス検出のためのエンドツーエンド深層学習手法アフォーダンス検出
