医療ロボティクス/ナビゲーション2025/11/1arXiv:2511.10699

DualVision ArthroNav: 外付けカメラによる画像ベース関節鏡ナビゲーションの位置推定と再構成の改善

DualVision ArthroNav: Investigating Opportunities to Enhance Localization and Reconstruction in Image-based Arthroscopy Navigation via External Cameras

シェア:X Threads Facebook LINE はてブ Bluesky

関節鏡に外付けカメラを追加し、単眼内視鏡映像と組み合わせることで、スケール曖昧性やドリフトを解消し、高精度な位置推定とシーン再構成を実現するナビゲーションシステムを提案した。

詳しい要約

1. どんなもの？

- 関節鏡下手術のナビゲーションを目的とした multi-camera システム「DualVision ArthroNav」の提案 - arthroscope に外部カメラを剛結合して装着し、外部カメラと monocular arthroscope の映像を併用 - 外部カメラで安定した visual odometry と絶対位置推定、arthroscope 映像で dense scene reconstruction を行う - 光学式トラッキングと純粋な vision-based 手法の間を埋める実用的かつ低コストな解を狙う

2. 先行研究と比べてどこがすごい？

- 既存の optical tracking は作業空間制約が厳しく手術ワークフローを妨げる - 従来の vision-based 代替手法は monocular arthroscope のみに依存し、drift・scale ambiguity・急な動きや occlusion に弱い - 提案手法は外部カメラを追加することで monocular SLAM の scale ambiguity と長期 drift を解消し、robust な relocalization を実現 - calibration error を効果的に補償できる点も従来と異なる

3. 技術・手法の肝は？

- arthroscope に剛結合した external camera による安定した visual odometry と絶対 localization - monocular arthroscope video による dense scene reconstruction - 相補的な2視点の統合により monocular SLAM の scale ambiguity と long-term drift を解消 - robust relocalization を可能にする統合フレームワーク - calibration error を補償する仕組みを備える

4. どうやって有効だと検証した？

- 実験により calibration error の効果的補償を確認 - 平均 absolute trajectory error 1.09 mm を達成 - 再構成シーンの平均 target registration error 2.16 mm - 視覚的忠実度は SSIM = 0.69、PSNR = 22.19 - 具体的なデータセットや被験体数は要旨からは不明

5. 議論はある？

- 光学式トラッキングと純粋 vision-based 手法のギャップを埋める実用的・低コストな解と位置づけ - 臨床展開可能な完全 vision-based 関節鏡ガイダンスへの道筋を示す - 限界や失敗事例、臨床現場での課題に関する具体的議論は要旨からは不明

6. 次に読むべき論文は？

- monocular SLAM（scale ambiguity・drift が課題となる定番手法） - optical tracking を用いた手術ナビゲーション（比較対象の従来手法） - visual odometry および relocalization の関連研究 - dense scene reconstruction を用いた手術支援手法 - 要旨で具体的な論文名の参照はないため、上記は同分野の一般手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hongchao Shu, Lalithkumar Seenivasan, Mingxu Liu, Yunseo Hwang, Yu-Chun Ku, Jonathan Knopf, Alejandro Martin-Gomez, Mehran Armand, Mathias Unberath

分類: eess.IV, cs.CV, cs.RO

原文アブストラクト

Arthroscopic procedures can greatly benefit from navigation systems that enhance spatial awareness, depth perception, and field of view. However, existing optical tracking solutions impose strict workspace constraints and disrupt surgical workflow. Vision-based alternatives, though less invasive, often rely solely on the monocular arthroscope camera, making them prone to drift, scale ambiguity, and sensitivity to rapid motion or occlusion. We propose DualVision ArthroNav, a multi-camera arthroscopy navigation system that integrates an external camera rigidly mounted on the arthroscope. The external camera provides stable visual odometry and absolute localization, while the monocular arthroscope video enables dense scene reconstruction. By combining these complementary views, our system resolves the scale ambiguity and long-term drift inherent in monocular SLAM and ensures robust relocalization. Experiments demonstrate that our system effectively compensates for calibration errors, achieving an average absolute trajectory error of 1.09 mm. The reconstructed scenes reach an average target registration error of 2.16 mm, with high visual fidelity (SSIM = 0.69, PSNR = 22.19). These results indicate that our system provides a practical and cost-efficient solution for arthroscopic navigation, bridging the gap between optical tracking and purely vision-based systems, and paving the way toward clinically deployable, fully vision-based arthroscopic guidance.

arXivで原文を読む →arXiv概要ページ

← 論文一覧