日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

内視鏡再構成arXiv:2609.32399

Endo-TSR: 内視鏡再構成のための時空間スペクトルモデリング

Endo-TSR: Temporal Spectral Modeling of Appearance and Motion for Endoscopic Reconstruction

シェア:XThreadsFacebookLINEはてブBluesky

内視鏡シーン再構成において、変形ガウスモデルにフーリエ色残差と並進残差を導入し、組織の動きと外観変化を時空間的にモデル化する手法を提案。EndoNeRFとStereoMISで最高PSNRを達成。

詳しい要約

1. どんなもの?

内視鏡シーン再構成のための手法 Endo-TSR を提案する論文。 - 組織の動きと時間的な見た目の変化を同時にモデル化する。 - Deformable Gaussian モデルを拡張し、色の時間変化を表現する。 - 微細な表面詳細の復元も目指す。 - EndoNeRF と StereoMIS で評価。

2. 先行研究と比べてどこがすごい?

Deformable Gaussian モデルは明示的な軌跡を持つが、固定の色係数で光学的変化を扱えない。 - Endo-TSR は色の時間表現を追加し、この制約を克服。 - 評価した全シーケンスで最高 PSNR を達成し、state-of-the-art の描画品質を示す。 - アブレーションで時間的見た目の寄与が最大の PSNR 向上をもたらすと報告。

3. 技術・手法の肝は?

Deformable Gaussian splatting を基盤とする。 - 有界な Fourier 色残差を導入し、局所的な見た目の変化を捉える。 - 共有時間周波数上で独立な translation 残差を加える。 - Matérn spectral prior で動き補正を正則化。 - マルチスケール Laplacian 監督で組織詳細の復元を導く。 - 画像フィッティングを共同で行う。

4. どうやって有効だと検証した?

EndoNeRF と StereoMIS データセットで広範な実験。 - 評価した全シーケンスで最高 PSNR を達成。 - アブレーションで時間的見た目が最大の PSNR 利得。 - 見た目と詳細の監督が固定 Gaussian 数で描画を改善。

5. 議論はある?

要旨からは不明。 - 限界や失敗事例、計算コスト、一般化性についての議論は記載されていない。

6. 次に読むべき論文は?

Deformable Gaussian splatting 関連の研究。 - EndoNeRF および StereoMIS データセットを用いた内視鏡再構成の先行研究。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Taoyu Wu, Yiyi Miao, Qi Shao, Zhuoxiao Li, Zhe Tang, Limin Yu, Baoru Huang

分類: cs.CV, cs.RO

原文アブストラクト

Endoscopic scene reconstruction requires modeling tissue motion and temporal appearance while recovering fine surface detail. Deformable Gaussian models provide explicit trajectories, but their fixed colour coefficients lack a dedicated temporal representation for photometric changes. We propose Endo-TSR, which augments deformable Gaussian splatting with bounded Fourier colour residuals and independent translation residuals on shared temporal frequencies. The colour residuals capture local appearance changes, while a Matérn spectral prior regularises motion corrections. Multi-scale Laplacian supervision guides tissue-detail recovery during joint image fitting. Extensive experiments on the EndoNeRF and StereoMIS datasets demonstrate state-of-the-art rendering quality, with the highest PSNR across all evaluated sequences. Ablation studies show that temporal appearance yields the largest PSNR gain among the tested component additions, while appearance and detail supervision jointly improve rendering with fixed Gaussian counts.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI