手術器具セグメンテーションのための適応受容野付き双線形注意ネットワーク
BARNet: Bilinear Attention Network with Adaptive Receptive Fields for Surgical Instrument Segmentation
照明変動とスケール変動に対応するため、双線形注意と適応受容野を組み合わせた手術器具セグメンテーション用ネットワークを提案し、EndoVis 2017で首位の性能を達成した。
著者: Zhen-Liang Ni, Gui-Bin Bian, Guan-An Wang, Xiao-Hu Zhou, Zeng-Guang Hou, Xiao-Liang Xie, Zhen Li, Yu-Han Wang
分類: cs.CV, cs.LG, cs.RO, eess.IV
原文アブストラクト
Surgical instrument segmentation is extremely important for computer-assisted surgery. Different from common object segmentation, it is more challenging due to the large illumination and scale variation caused by the special surgical scenes. In this paper, we propose a novel bilinear attention network with adaptive receptive field to solve these two challenges. For the illumination variation, the bilinear attention module can capture second-order statistics to encode global contexts and semantic dependencies between local pixels. With them, semantic features in challenging areas can be inferred from their neighbors and the distinction of various semantics can be boosted. For the scale variation, our adaptive receptive field module aggregates multi-scale features and automatically fuses them with different weights. Specifically, it encodes the semantic relationship between channels to emphasize feature maps with appropriate scales, changing the receptive field of subsequent convolutions. The proposed network achieves the best performance 97.47% mean IOU on Cata7 and comes first place on EndoVis 2017 by 10.10% IOU overtaking second-ranking method.
関連論文
- 前立腺手術ファントムのための解剖学的知識誘導型CT三次元セグメンテーションパイプライン医療画像セグメンテーション
- SIRA: クエリ基準アライメントによる推論対応手術器具セグメンテーション医療画像セグメンテーション
- 視覚特性事前分布による手術器具セグメンテーションの個人化フェデレーテッド学習医療画像セグメンテーション
- Surgical SAM 2: 効率的なフレーム枝刈りによる手術動画のリアルタイムセグメンテーション医療画像セグメンテーション
- ロボット支援心血管カテーテル治療におけるツールセグメンテーションのための多方向デコーダ分岐による弱教師あり学習医療画像セグメンテーション
- 超音波画像における針の動きを考慮したセグメンテーション医療画像セグメンテーション
