日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

手術ロボティクスarXiv:2604.09051

ロボット支援部分腎摘除術における腎縫合の細粒度アクションセグメンテーション

Fine-Grained Action Segmentation for Renorrhaphy in Robot-Assisted Partial Nephrectomy

シェア:XThreadsFacebookLINEはてブBluesky

ロボット支援部分腎摘除術中の腎縫合動作をフレーム単位で認識する細粒度アクションセグメンテーションのベンチマークを構築し、4つの時間モデルを比較評価した。

詳しい要約

1. どんなもの?

- 手術支援ロボットda Vinci Xiで撮影された50本の臨床ビデオを用いたRAPN(robot-assisted partial nephrectomy)のrenorrhaphy(腎実質縫合)におけるfine-grained action segmentationのベンチマークSIA-RAPNを提示。 - 12のframe-levelラベルで注釈付けされ、視覚的に類似した縫合ジェスチャーをframe単位で認識する問題を定義。 - 可変長でクラス不均衡が大きい点が特徴。 - I3D特徴量に基づく4つのtemporal model(MS-TCN++、AsFormer、TUT、DiffAct)を比較。

2. 先行研究と比べてどこがすごい?

- 従来のRAPN動作認識・セグメンテーション研究と比べ、renorrhaphyに特化したfine-grainedなframe-levelラベル12クラスを定義した点が新しい。 - 50本の臨床ビデオと5つのsplit構成を公開し、複数モデルを同一条件で比較するベンチマークを提供。 - 単一ポートRAPNデータセットへのcross-domain評価も報告し、汎化性を検討。 - ただし、先行研究との直接的な性能比較の記述は要旨からは不明。

3. 技術・手法の肝は?

- I3D特徴量を入力とし、MS-TCN++、AsFormer、TUT、DiffActの4つのtemporal modelでframe-level action segmentationを実施。 - 評価指標はbalanced accuracy、edit score、overlap閾値10/25/50でのsegmental F1、frame-wise accuracy、frame-wise mean average precision。 - 主要評価はSIA-RAPNの5つのsplit構成で実施し、さらに単一ポートRAPNデータセットでcross-domain結果を報告。 - 可変長ジェスチャーとクラス不均衡に対処するモデル設計が肝。

4. どうやって有効だと検証した?

- SIA-RAPNの5つのsplit構成で4モデルを評価し、各指標の最良値を報告。 - DiffActがF1、frame-wise accuracy、edit score、frame mAPで最高値を達成。 - MS-TCN++がbalanced accuracyで最高値を達成。 - 別の単一ポートRAPNデータセットでcross-domain結果も報告。

5. 議論はある?

- モデル間で指標ごとに優劣が分かれ、DiffActとMS-TCN++が異なる指標で最高性能を示す。 - クラス不均衡や可変長ジェスチャーへの対処が課題として残る。 - cross-domain結果の詳細や臨床応用への議論は要旨からは不明。

6. 次に読むべき論文は?

- MS-TCN++ - AsFormer - TUT - DiffAct - I3D - SIA-RAPN - 関連するtemporal action segmentationの定番手法(例:MS-TCN、ASFormerなど)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiaheng Dai, Huanrong Liu, Tailai Zhou, Tongyu Jia, Qin Liu, Yutong Ban, Zeju Li, Yu Gao, Xin Ma, Qingbiao Li

分類: cs.CV, cs.RO

原文アブストラクト

Fine-grained action segmentation during renorrhaphy in robot-assisted partial nephrectomy requires frame-level recognition of visually similar suturing gestures with variable duration and substantial class imbalance. The SIA-RAPN benchmark defines this problem on 50 clinical videos acquired with the da Vinci Xi system and annotated with 12 frame-level labels. The benchmark compares four temporal models built on I3D features: MS-TCN++, AsFormer, TUT, and DiffAct. Evaluation uses balanced accuracy, edit score, segmental F1 at overlap thresholds of 10, 25, and 50, frame-wise accuracy, and frame-wise mean average precision. In addition to the primary evaluation across five released split configurations on SIA-RAPN, the benchmark reports cross-domain results on a separate single-port RAPN dataset. Across the strongest reported values over those five runs on the primary dataset, DiffAct achieves the highest F1, frame-wise accuracy, edit score, and frame mAP, while MS-TCN++ attains the highest balanced accuracy.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI