日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

手術ロボティクス/セグメンテーションarXiv:2007.09107

ロボット手術における器具セグメンテーションのための合成・実画像入力

Synthetic and Real Inputs for Tool Segmentation in Robotic Surgery

シェア:XThreadsFacebookLINEはてブBluesky

ロボットのキネマティクス情報と腹腔鏡画像を組み合わせ、シミュレーション画像と実画像を並列処理する深層学習モデルで手術器具のセグメンテーションを高精度化し、新規データセットも公開した論文。

著者: Emanuele Colleoni, Philip Edwards, Danail Stoyanov

分類: cs.CV, cs.LG, cs.RO

原文アブストラクト

Semantic tool segmentation in surgical videos is important for surgical scene understanding and computer-assisted interventions as well as for the development of robotic automation. The problem is challenging because different illumination conditions, bleeding, smoke and occlusions can reduce algorithm robustness. At present labelled data for training deep learning models is still lacking for semantic surgical instrument segmentation and in this paper we show that it may be possible to use robot kinematic data coupled with laparoscopic images to alleviate the labelling problem. We propose a new deep learning based model for parallel processing of both laparoscopic and simulation images for robust segmentation of surgical tools. Due to the lack of laparoscopic frames annotated with both segmentation ground truth and kinematic information a new custom dataset was generated using the da Vinci Research Kit (dVRK) and is made available.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5Google DeepMind、ロボット向けAIを発表新製品・発表

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI