日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

セグメンテーションarXiv:2508.01713

階層的クラス増分セマンティックセグメンテーションによる動的ロボット支援手術

Dynamic Robot-Assisted Surgery with Hierarchical Class-Incremental Semantic Segmentation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット支援手術のためのクラス増分セグメンテーション手法TOPICS+を提案し、手術環境向けのベンチマークと144クラス超のラベルを整備した。

詳しい要約

1. どんなもの?

- ロボット支援手術のための動的シーン理解を目的とした、class-incremental semantic segmentation (CISS) の研究。 - 既存の TOPICS を拡張した TOPICS+ を提案し、手術環境に特化した頑健なセグメンテーションを目指す。 - 手術環境向けの6つの新しい CISS benchmark と、Syn-Mediverse 上の144クラス超の refined label set を導入。 - code と trained models を公開。

2. 先行研究と比べてどこがすごい?

- 先行の TOPICS を基盤とし、手術シーン向けに拡張した点が特徴。 - 強いクラス不均衡に対処するため Dice loss を hierarchical loss に組み込む。 - hierarchical pseudo-labeling を導入。 - 手術環境に合わせた label taxonomy を設計。 - 手術環境向けの複数 incremental steps・複数カテゴリからなる6つの CISS benchmark を新たに提案。 - 従来の静的データセット学習モデルが動的環境で抱える制約に対処する点を狙う。

3. 技術・手法の肝は?

- TOPICS の Taxonomy-Oriented Poincaré-regularized Incremental Class Segmentation を拡張。 - hierarchical loss に Dice loss を組み込み、クラス不均衡に対応。 - hierarchical pseudo-labeling を採用。 - 手術環境向けの label taxonomy を設計。 - 過去データで再学習せずに新クラスへ継続適応し、catastrophic forgetting を回避する CISS の枠組みを用いる。

4. どうやって有効だと検証した?

- 手術環境を模した6つの CISS benchmark を設計し、複数の incremental steps と複数カテゴリで評価。 - Syn-Mediverse synthetic dataset 上で144クラス超の refined label set を用いた評価 benchmark を提供。 - 具体的な精度・比較結果の数値は要旨からは不明。

5. 議論はある?

- 動的で進化する手術環境における静的学習モデルの限界と、CISS による継続適応の必要性を議論。 - クラス不均衡や階層的ラベル構造への対処が課題として示唆される。 - 具体的な限界や失敗事例、計算コストなどの議論は要旨からは不明。

6. 次に読むべき論文は?

- TOPICS (Taxonomy-Oriented Poincaré-regularized Incremental Class Segmentation) - class-incremental semantic segmentation (CISS) の関連手法 - Syn-Mediverse synthetic dataset 関連の研究 - catastrophic forgetting 対策の incremental learning 研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Julia Hindel, Ema Mekic, Enamundram Naga Karthik, Rohit Mohan, Daniele Cattaneo, Maria Kalweit, Abhinav Valada

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

Robot-assisted surgeries rely on accurate and real-time scene understanding to safely guide surgical instruments. However, segmentation models trained on static datasets face key limitations when deployed in these dynamic and evolving surgical environments. Class-incremental semantic segmentation (CISS) allows models to continually adapt to new classes while avoiding catastrophic forgetting of prior knowledge, without training on previous data. In this work, we build upon the recently introduced Taxonomy-Oriented Poincar\'e-regularized Incremental Class Segmentation (TOPICS) approach and propose an enhanced variant, termed TOPICS+, specifically tailored for robust segmentation of surgical scenes. Concretely, we incorporate the Dice loss into the hierarchical loss formulation to handle strong class imbalances, introduce hierarchical pseudo-labeling, and design tailored label taxonomies for robotic surgery environments. We also propose six novel CISS benchmarks designed for robotic surgery environments including multiple incremental steps and several semantic categories to emulate realistic class-incremental settings in surgical environments. In addition, we introduce a refined set of labels with more than 144 classes on the Syn-Mediverse synthetic dataset, hosted online as an evaluation benchmark. We make the code and trained models publicly available at http://topics.cs.uni-freiburg.de.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI