日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2512.11773

ProbeMDE: 手術ロボティクスにおける単眼深度推定のための不確実性誘導型能動固有受容

ProbeMDE: Uncertainty-Guided Active Proprioception for Monocular Depth Estimation in Surgical Robotics

シェア:XThreadsFacebookLINEはてブBluesky

RGB画像と触覚による疎な深度測定を組み合わせ、アンサンブルの不確実性とSVGDを用いて効率的に触る場所を選び、手術シーンでの単眼深度推定精度を向上させる手法を提案。

詳しい要約

1. どんなもの?

- 手術ロボティクスにおける単眼深度推定(MDE)の不確実性・不正確さを緩和するための能動的センシングフレームワーク「ProbeMDE」 - RGB画像と、proprioception(ロボットが既知の構成で環境に接触して得る)による疎な深度測定を組み合わせる - コストを考慮した(cost-aware)能動的センシングとして、どこを触って計測するかを選択する - 対象はtextureless surfaces、specular reflections、occlusionsが多い手術シーン - シミュレーションと実機のcentral airway obstruction surgical phantomsで検証

2. 先行研究と比べてどこがすごい?

- 従来のMDEは手術シーンのような困難環境で不確実・不正確になりやすい - 提案手法はRGBのみでなくproprioceptionによる疎な既知深度測定を条件に加える点が特徴 - ensembleの分散で予測不確実性を定量化し、候補測定位置に対する不確実性の勾配を利用する - 最大情報量の位置を選ぶ際のmode collapseをSVGDで防ぐ点が工夫 - 標準的な深度推定メトリクスでbaseline手法を上回り、proprioceptive measurementsの回数を抑えつつ精度向上 - 具体的な比較対象のbaseline名は要旨からは不明

3. 技術・手法の肝は?

- ensemble of MDE modelsで密な深度マップを予測 - 入力条件はRGB画像と、proprioceptionで得た疎な既知深度測定の両方 - ensembleのvarianceで予測不確実性を定量化 - 候補測定位置に対する不確実性の勾配(gradient of uncertainty)を計算 - その勾配マップ上でStein Variational Gradient Descent(SVGD)を用い、mode collapseを防ぎながら最も情報量の高いpropriocept(touch)位置を選択 - cost-awareな枠組みで、必要なproprioceptive measurementsの数を最小化

4. どうやって有効だと検証した?

- シミュレーション実験と物理実験の両方を実施 - 対象はcentral airway obstruction surgical phantoms - 標準的な深度推定メトリクスで評価 - baseline手法と比較し、より高い精度を達成 - 必要なproprioceptive measurementsの数を最小化できることを示す - 具体的なメトリクス名・数値・被験者数などは要旨からは不明

5. 議論はある?

- 手術シーンのtextureless surfaces、specular reflections、occlusionsへの対処が動機 - 不確実性に基づく能動的proprioceptionにより測定コストを抑える設計 - SVGD導入の理由としてmode collapseの防止を挙げている - 限界・失敗事例・計算コストの詳細な議論は要旨からは不明 - 実機実験の範囲や一般化可能性についての具体的議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な研究名は明示されていない - 関連手法としてensemble-based uncertainty estimation、Stein Variational Gradient Descent(SVGD)、active sensing / active perception、monocular depth estimation(MDE) - 手術ロボティクス文脈ではproprioceptionを用いた深度補正・触覚に基づく知覚の研究 - 同分野の定番としてsurgical scene understandingやdepth completionの研究を次に読む候補として挙げる(具体名は要旨からは不明)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Britton Jordan, Jordan Thompson, Jesse F. d'Almeida, Hao Li, Nithesh Kumar, Susheela Sharma Stern, James Ferguson, Ipek Oguz, Robert J. Webster, Daniel Brown, Alan Kuntz

分類: cs.RO

原文アブストラクト

Monocular depth estimation (MDE) provides a useful tool for robotic perception, but its predictions are often uncertain and inaccurate in challenging environments such as surgical scenes where textureless surfaces, specular reflections, and occlusions are common. To address this, we propose ProbeMDE, a cost-aware active sensing framework that combines RGB images with sparse proprioceptive measurements for MDE. Our approach utilizes an ensemble of MDE models to predict dense depth maps conditioned on both RGB images and on a sparse set of known depth measurements obtained via proprioception, where the robot has touched the environment in a known configuration. We quantify predictive uncertainty via the ensemble's variance and measure the gradient of the uncertainty with respect to candidate measurement locations. To prevent mode collapse while selecting maximally informative locations to propriocept (touch), we leverage Stein Variational Gradient Descent (SVGD) over this gradient map. We validate our method in both simulated and physical experiments on central airway obstruction surgical phantoms. Our results demonstrate that our approach outperforms baseline methods across standard depth estimation metrics, achieving higher accuracy while minimizing the number of required proprioceptive measurements. Project page: https://brittonjordan.github.io/probe_mde/

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI