日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

手術ロボティクス/世界モデルarXiv:2606.19889

SurgVista: 手術における長期的世界モデリングと物理的に妥当な器具-組織ダイナミクス

SurgVista: Long-Horizon Surgical World Modeling with Plausible Instrument-Tissue Dynamics

シェア:XThreadsFacebookLINEはてブBluesky

手術映像の世界モデルを提案し、器具と組織の相互作用の整合性と長期的な予測の安定性を向上させる手法を開発した。

詳しい要約

1. どんなもの?

- 外科手術のためのworld model「SurgVista」を提案。 - 初期観察から行動条件付き未来フレームを生成。 - 空間的相互作用の不整合と時間的忠実性の崩壊を緩和。 - 評価用ベンチマーク「SurgWorld-Bench」も導入。

2. 先行研究と比べてどこがすごい?

- 既存手法は空間的相互作用の不整合と時間的忠実性の崩壊が問題。 - SurgVistaは両失敗モードを訓練レシピで緩和。 - 視覚品質、時間的一貫性、相互作用忠実性でSOTAを上回る。 - 予測ホライズンが長くなるほど利得が拡大。

3. 技術・手法の肝は?

- Deformation Consistency Regularization:訓練動画からscene-point trajectoriesを抽出し、latent contrastive learningでフレーム間一貫性を強制。 - Drift Adaptation Training:オンライン予測残差と長期ドリフト統計に合わせたphotometric augmentationsで条件フレームを摂動。 - これにより物理的に整合したinstrument-tissue dynamicsと長期ロールアウトの視覚忠実性を維持。

4. どうやって有効だと検証した?

- SurgWorld-Benchを導入:多様な手順タイプ、長距離ロールアウト、instrument-motion accuracyとtissue-response fidelityを分離した指標。 - 広範な実験でSurgVistaが視覚品質、時間的一貫性、相互作用忠実性でSOTAを一貫して上回る。 - 予測ホライズンが長くなるにつれ利得が拡大することを確認。

5. 議論はある?

- 要旨からは不明。 - 限界や議論の詳細は記述されていない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番としてsurgical world models、robot policy learning、autoregressive rollouts、latent contrastive learning、photometric augmentationsが関連。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wentao Pan, Wuyang Li, Shengyuan Liu, Xinyu Liu, Hengyu Liu, Yixuan Yuan

分類: cs.CV

原文アブストラクト

Scaling robot policy learning for autonomous surgery is challenging, as expert demonstrations are expensive and in vivo exploration poses substantial safety risks. Surgical world models address this by generating realistic, action-conditioned future frames from an initial observation, but existing methods exhibit two persistent failure modes: spatial interaction incoherence, where visible instrument contact fails to induce spatially consistent tissue deformation, and temporal fidelity collapse, where prediction errors compound across autoregressive rollouts and progressively corrupt visual quality. We present SurgVista, a surgical world model that mitigates both failures through two training recipes. Deformation Consistency Regularization extracts scene-point trajectories from training videos and enforces cross-frame coherence through latent contrastive learning, strengthening physically consistent instrument-tissue dynamics. Drift Adaptation Training mitigates long-horizon drift by perturbing conditioning frames with online prediction residuals and photometric augmentations calibrated to long-horizon drift statistics, sustaining visual fidelity over extended rollouts. To enable rigorous evaluation, we further introduce SurgWorld-Bench, featuring diverse procedure types, long-range rollouts, and decoupled metrics for instrument-motion accuracy and tissue-response fidelity. Extensive experiments show that SurgVista consistently outperforms state-of-the-art methods across visual quality, temporal consistency, and interaction fidelity, with gains widening as the prediction horizon grows.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI