日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

手術ジェスチャー認識arXiv:2003.04772

手術ジェスチャー認識と進捗予測のためのマルチタスク再帰型ニューラルネットワーク

Multi-Task Recurrent Neural Network for Surgical Gesture Recognition and Progress Prediction

シェア:XThreadsFacebookLINEはてブBluesky

手術のロボット運動データから、ジェスチャー認識とタスク進捗推定を同時に行うマルチタスクRNNを提案し、追加の手動ラベルなしで認識精度が向上することを示した。

著者: Beatrice van Amsterdam, Matthew J. Clarkson, Danail Stoyanov

分類: cs.CV, cs.LG, cs.RO

原文アブストラクト

Surgical gesture recognition is important for surgical data science and computer-aided intervention. Even with robotic kinematic information, automatically segmenting surgical steps presents numerous challenges because surgical demonstrations are characterized by high variability in style, duration and order of actions. In order to extract discriminative features from the kinematic signals and boost recognition accuracy, we propose a multi-task recurrent neural network for simultaneous recognition of surgical gestures and estimation of a novel formulation of surgical task progress. To show the effectiveness of the presented approach, we evaluate its application on the JIGSAWS dataset, that is currently the only publicly available dataset for surgical gesture recognition featuring robot kinematic data. We demonstrate that recognition performance improves in multi-task frameworks with progress estimation without any additional manual labelling and training.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI