日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

医療ロボティクスarXiv:2601.02798

合成データを用いた追従型ロボット内視鏡ナビゲーションのための強化学習

Reinforcement Learning for Follow-the-Leader Robotic Endoscopic Navigation via Synthetic Data

シェア:XThreadsFacebookLINEはてブBluesky

単眼深度推定と強化学習を組み合わせ、合成データで訓練した追従型柔軟内視鏡ロボットの自律ナビゲーション手法を提案。

詳しい要約

1. どんなもの?

- 医療・産業用内視鏡ロボットの自律ナビゲーションを目的とした研究。 - 柔軟な連続体構造を持つfollow-the-leader型内視鏡ロボットを提案。 - 単眼深度推定に導かれた視覚ベースの深層強化学習フレームワークを構築。 - NVIDIA Omniverse上に現実的な腸管シミュレーション環境を構築し、自律ナビゲーション戦略を訓練・評価。 - NVIDIA Replicatorで合成管腔内画像を生成し、Depth Anythingモデルをファインチューニング。 - 単眼カメラで腸管環境の密な3次元知覚を実現。 - 幾何認識型の報酬・ペナルティ機構を導入し、正確な管腔追跡を可能に。

2. 先行研究と比べてどこがすごい?

- 従来のアプローチでは内壁との接触回避が長年の課題であった。 - 提案するfollow-the-leader型ロボットは、内視鏡本体と腸壁との接触を最小化し、患者の不快感を軽減する。 - 元のDepth Anythingモデルと比較して、δ1深度精度が39.2%向上。 - 2番目に良い手法と比較して、ナビゲーションJ-indexを0.67低減。 - これらの結果から、提案手法の堅牢性と有効性が示された。

3. 技術・手法の肝は?

- 柔軟な連続体構造に基づくfollow-the-leader型内視鏡ロボット。 - 単眼深度推定に導かれた視覚ベースの深層強化学習フレームワーク。 - NVIDIA Omniverse上に構築した現実的な腸管シミュレーション環境。 - NVIDIA Replicatorを用いて数千の合成管腔内画像を生成し、Depth Anythingモデルをファインチューニング。 - 単眼カメラによる密な3次元知覚。 - 幾何認識型の報酬・ペナルティ機構による正確な管腔追跡。

4. どうやって有効だと検証した?

- NVIDIA Omniverse上に構築した腸管シミュレーション環境で訓練と評価を実施。 - 元のDepth Anythingモデルと比較してδ1深度精度が39.2%向上。 - 2番目に良い手法と比較してナビゲーションJ-indexを0.67低減。 - これらの定量的結果により、提案手法の堅牢性と有効性を実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- Depth Anythingモデル(深度推定の関連研究) - NVIDIA Omniverse(シミュレーション環境) - NVIDIA Replicator(合成データ生成) - follow-the-leader型内視鏡ロボット(関連研究) - 深層強化学習を用いた内視鏡ナビゲーション(同分野の定番)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sicong Gao, Chen Qian, Laurence Xian, Liao Wu, Maurice Pagnucco, Yang Song

分類: cs.RO

原文アブストラクト

Autonomous navigation is crucial for both medical and industrial endoscopic robots, enabling safe and efficient exploration of narrow tubular environments without continuous human intervention, where avoiding contact with the inner walls has been a longstanding challenge for prior approaches. We present a follow-the-leader endoscopic robot based on a flexible continuum structure designed to minimize contact between the endoscope body and intestinal walls, thereby reducing patient discomfort. To achieve this objective, we propose a vision-based deep reinforcement learning framework guided by monocular depth estimation. A realistic intestinal simulation environment was constructed in \textit{NVIDIA Omniverse} to train and evaluate autonomous navigation strategies. Furthermore, thousands of synthetic intraluminal images were generated using NVIDIA Replicator to fine-tune the Depth Anything model, enabling dense three-dimensional perception of the intestinal environment with a single monocular camera. Subsequently, we introduce a geometry-aware reward and penalty mechanism to enable accurate lumen tracking. Compared with the original Depth Anything model, our method improves $\delta_{1}$ depth accuracy by 39.2% and reduces the navigation J-index by 0.67 relative to the second-best method, demonstrating the robustness and effectiveness of the proposed approach.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI