日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2603.08324

EndoSERV: 視覚ベースの内腔ロボットナビゲーションシステム

EndoSERV: A Vision-based Endoluminal Robot Navigation System

シェア:XThreadsFacebookLINEはてブBluesky

内視鏡手術ロボットのナビゲーション精度を向上させるため、管腔構造を分割してオドメトリを推定し、実画像を仮想領域にマッピングしてラベル不足を補う新しい位置推定法を提案した。

詳しい要約

1. どんなもの?

- 内視鏡下のロボット支援手術におけるナビゲーションを目的とした、視覚ベースの位置推定手法「EndoSERV」を提案。 - 二つの主要コンポーネント:Segment-to-structureとReal-to-Virtual mappingから成る。 - 長距離・複雑な管腔構造を小さなサブセグメントに分割し、各々のオドメトリを独立に推定。 - ラベル不足に対処するため、実画像特徴を仮想領域にマッピングし、仮想ポーズの正解を利用。 - オフライン事前学習でテクスチャ非依存の特徴を抽出し、オンラインで実環境に適応。

2. 先行研究と比べてどこがすごい?

- 既存の視覚ベース位置推定は、組織変形、in vivoアーチファクト、一貫した位置推定のための特徴的なランドマークの欠如により誤りやすい。 - EndoSERVはこれらの課題に対処し、実ポーズラベルなしでも有効性を発揮。 - 公開データセットと臨床データセットの両方で実験を行い、有効性を実証。

3. 技術・手法の肝は?

- 長距離・複雑な管腔構造を小さなサブセグメントに分割し、各サブセグメントで独立にオドメトリを推定。 - ラベル不足に対処するため、実画像特徴を仮想領域にマッピングする効率的な転移技術を採用。 - 仮想ポーズの正解を利用可能にする。 - トレーニングはオフライン事前学習(テクスチャ非依存特徴の抽出)とオンライン適応(実世界条件への適応)の二段階。

4. どうやって有効だと検証した?

- 公開データセットと臨床データセットの両方を用いた広範な実験を実施。 - 実ポーズラベルが一切ない場合でも手法の有効性を実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。同分野の定番として、視覚オドメトリ(Visual Odometry)やSLAM(Simultaneous Localization and Mapping)に関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Junyang Wu, Fangfang Xie, Minghui Zhang, Hanxiao Zhang, Jiayuan Sun, Yun Gu, Guang-Zhong Yang

分類: cs.RO, cs.AI

原文アブストラクト

Robot-assisted endoluminal procedures are increasingly used for early cancer intervention. However, the intricate, narrow and tortuous pathways within the luminal anatomy pose substantial difficulties for robot navigation. Vision-based navigation offers a promising solution, but existing localization approaches are error-prone due to tissue deformation, in vivo artifacts and a lack of distinctive landmarks for consistent localization. This paper presents a novel EndoSERV localization method to address these challenges. It includes two main parts, \textit{i.e.}, \textbf{SE}gment-to-structure and \textbf{R}eal-to-\textbf{V}irtual mapping, and hence the name. For long-range and complex luminal structures, we divide them into smaller sub-segments and estimate the odometry independently. To cater for label insufficiency, an efficient transfer technique maps real image features to the virtual domain to use virtual pose ground truth. The training phases of EndoSERV include an offline pretraining to extract texture-agnostic features, and an online phase that adapts to real-world conditions. Extensive experiments based on both public and clinical datasets have been performed to demonstrate the effectiveness of the method even without any real pose labels.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI