日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

手術ロボティクスarXiv:2608.08070

SurgWMBench:手術器具の動作計画のための視覚ベースのワールドモデルベンチマーク

SurgWMBench: A Vision-Based Benchmark for World-Modeling Surgical Instrument Motion Planning

シェア:XThreadsFacebookLINEはてブBluesky

手術映像から器具の動きと将来の状態遷移を予測するワールドモデルの評価に特化したベンチマークを提案し、従来の生成品質指標では測れない動作計画能力を評価する。

詳しい要約

1. どんなもの?

SurgWMBenchは、短期的な手術動作計画と動力学予測のための視覚ベースのベンチマークである。術中画像シーケンスと過去の器具軌跡が与えられたとき、近未来の器具動作予測と、連続的なロールアウトや入力摂動下での安定性を評価する。既存の手術ビデオ理解手法がフェーズ認識や動作模倣に留まるのに対し、器具動作がその後の手術状態をどう変えるかを予測することを目指す。

2. 先行研究と比べてどこがすごい?

既存の手術ビデオ理解手法はフェーズ・動作・ワークフロー状態の認識に焦点を当て、器具動作の明示的モデリングが不十分である。一方、ツール動作予測手法は軌跡予測はできるが、将来のビデオ状態の共進化を捉えない。ワールドモデルは視覚状態遷移と器具動作動力学を統合するが、既存の手術ワールドモデル研究はFVDやCD-FVDなどの生成品質指標に依存し、軌跡の幾何学的正確性・時間的一貫性・下流計画への実用性を直接評価しない。SurgWMBenchは、動作中心の能力を評価するための公開データセットと標準化された評価プロトコルを提供する点で新規である。

3. 技術・手法の肝は?

手法の肝は、術中画像シーケンスと履歴器具軌跡を入力とし、近未来の器具動作予測と、連続ロールアウトや入力摂動下での安定性を評価するベンチマーク設計にある。具体的な評価指標やモデル構造は要旨からは不明だが、視覚状態遷移と器具動作動力学の統合的モデリングを促進するための評価フレームワークを提供する点が中核である。

4. どうやって有効だと検証した?

有効性の検証方法は要旨からは不明である。ベンチマークの導入であり、具体的な実験結果や比較手法による検証は記載されていない。

5. 議論はある?

議論としては、既存の生成品質指標(FVD, CD-FVD)が動作計画と整合しないという問題を提起している。また、手術ワールドモデル分野には公開データセットと標準化された評価プロトコルが不足しているという構造的限界を指摘している。SurgWMBenchがこれらのギャップを埋めることを提案しているが、ベンチマーク自体の限界や今後の課題については要旨からは不明である。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、手術ビデオ理解(フェーズ認識、動作認識、ワークフロー状態認識)、ツール動作予測手法、手術ワールドモデル研究(FVDやCD-FVDを用いた生成品質評価)が挙げられる。次に読むべき論文は、これらの分野の代表的な研究、特に手術ワールドモデルに関する既存研究や、動作予測の評価指標に関する論文が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Huanrong Liu, Weiliang Huang, Bob Zhang, Weichao Cai, Chunlin Tian, Qingbiao Li

分類: cs.RO

原文アブストラクト

Reliable surgical planning requires models that move beyond recognizing the current surgical step or imitating expert demonstrations, and instead anticipate how instrument motion reshapes subsequent operative states. Most surgical video understanding methods focus on recognizing phases, actions, or workflow states, while providing limited support for explicitly modeling instrument motion. Conversely, existing tool motion prediction methods can forecast instrument trajectories, but they generally do not capture the coupled evolution of future surgical video states. World models offer a natural framework for jointly modeling visual state transitions and instrument motion dynamics. However, existing surgical world model studies remain largely centered on visual generation quality, relying on generation-oriented metrics such as FVD and CD-FVD. These metrics are poorly aligned with instrument motion planning, as they do not directly measure whether predicted trajectories are geometrically accurate, temporally coherent, or actionable for downstream planning. This limitation is partly structural, since the field lacks public datasets and standardized evaluation protocols that provide the benchmarking infrastructure needed to assess motion-centric capabilities in surgical world models. In this paper, we introduce SurgWMBench, a vision-based benchmark for short-horizon surgical motion planning and dynamics prediction. Given intraoperative image sequences and historical instrument trajectory, SurgWMBench evaluates both near-future instrument motion prediction and stability under continuous rollout or input perturbations.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI