日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

手術支援ロボットarXiv:2509.14967

手術指示の曖昧性をアフォーダンスで解消する協調ロボット手術支援

Affordance-Based Disambiguation of Surgical Instructions for Collaborative Robot-Assisted Surgery

シェア:XThreadsFacebookLINEはてブBluesky

術者の音声指示を手術視野の視覚情報と道具の機能知識に基づいて解釈し、曖昧な指示を検出・明確化する枠組みを提案した。

詳しい要約

1. どんなもの?

- 手術室での人間-ロボット協働における言語指示の曖昧性を扱う研究 - 術者の音声指示を手術野の視覚文脈にgroundingして解釈・曖昧性解消するrobotic surgical assistantのframework - 二段階のaffordance-based reasoningとdual-set conformal predictionを組み合わせる - cholecystectomy動画から作成した曖昧指示データセットで評価

2. 先行研究と比べてどこがすごい?

- 先行研究との具体的比較は要旨からは不明 - 言語指示の曖昧性を視覚文脈へのgroundingで解消する点を特徴とする - tool capabilitiesのknowledge baseを用いた推論を組み込む点 - dual-set conformal predictionで決定の信頼度を統計的に保証し曖昧コマンドを検出・flagする点

3. 技術・手法の肝は?

- 二段階のaffordance-based reasoning - 第一段階: multimodal vision-language modelで手術sceneを解析 - 第二段階: tool capabilitiesのknowledge baseを用いて指示を推論 - 患者安全のためdual-set conformal predictionを適用 - ロボット決定に統計的に厳密なconfidence measureを付与 - 曖昧なコマンドを識別しflagする

4. どうやって有効だと検証した?

- cholecystectomy動画から収集した曖昧な手術要求のcurated datasetで評価 - 一般的なdisambiguation rateとして60%を報告 - 手術室でのより安全なhuman-robot interactionの手法として提示

5. 議論はある?

- disambiguation rateは60%であり、残りの曖昧指示への対応が課題として示唆される - dual-set conformal predictionによる安全性確保の枠組みを提示 - 具体的な限界や失敗事例の議論は要旨からは不明

6. 次に読むべき論文は?

- multimodal vision-language modelを用いた手術scene理解の関連研究 - conformal predictionをrobot意思決定に適用した研究 - affordance-based reasoningに関する研究 - human-robot collaboration in surgeryの指示理解研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ana Davila, Jacinto Colan, Yasuhisa Hasegawa

分類: cs.RO, cs.HC

原文アブストラクト

Effective human-robot collaboration in surgery is affected by the inherent ambiguity of verbal communication. This paper presents a framework for a robotic surgical assistant that interprets and disambiguates verbal instructions from a surgeon by grounding them in the visual context of the operating field. The system employs a two-level affordance-based reasoning process that first analyzes the surgical scene using a multimodal vision-language model and then reasons about the instruction using a knowledge base of tool capabilities. To ensure patient safety, a dual-set conformal prediction method is used to provide a statistically rigorous confidence measure for robot decisions, allowing it to identify and flag ambiguous commands. We evaluated our framework on a curated dataset of ambiguous surgical requests from cholecystectomy videos, demonstrating a general disambiguation rate of 60% and presenting a method for safer human-robot interaction in the operating room.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI