日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

SLAMarXiv:2601.10814

SurfSLAM: 実時間水中SLAMのためのSim-to-Realステレオ再構成

SurfSLAM: Sim-to-Real Underwater Stereo Reconstruction For Real-Time SLAM

シェア:XThreadsFacebookLINEはてブBluesky

シミュレーションデータと自己教師あり微調整で水中ステレオ視差推定を学習し、ステレオカメラとIMU・気圧・DVLを統合した実時間水中SLAMを実現した。

詳しい要約

1. どんなもの?

- 水中ロボット向けのリアルタイムSLAMフレームワークSurfSLAMを提案。 - ステレオカメラとIMU、barometric、DVLを融合。 - sim-to-real学習で水中ステレオdisparity推定ネットワークを訓練。 - 沈没船調査の実世界データセット(24,000組以上のステレオペア、photogrammetryモデル、参照軌道)を収集。

2. 先行研究と比べてどこがすごい?

- 陸上ステレオ深度推定の進歩に対し、水中では光減衰・視覚的アーティファクト・動的照明で劣化。 - 実世界水中ステレオデータセット不足で教師あり学習が困難。 - 空中データで訓練したネットワークは水中に直接転移不可。 - 提案はシミュレーションデータと自己教師ありfinetuningでsim-to-realを実現。

3. 技術・手法の肝は?

- シミュレーションデータを用いたsim-to-real訓練と自己教師ありfinetuning。 - 学習した深度予測を利用し、ステレオカメラとIMU、barometric、DVL測定を融合するリアルタイム水中SLAM。 - 具体的なネットワーク構造や融合アルゴリズムの詳細は要旨からは不明。

4. どうやって有効だと検証した?

- 実世界データで提案訓練手法の優位性を広範な実験で実証。 - 水中ステレオ推定の改善、複雑な沈没船サイトの正確な軌道推定と3D再構成を確認。 - データセットは24,000組以上のステレオペア、高品質dense photogrammetryモデル、参照軌道を含む。

5. 議論はある?

- 水中環境の光減衰、視覚的アーティファクト、動的照明、テクスチャ不足が課題。 - 実世界水中ステレオデータセットの不足が教師あり学習を妨げる。 - 水中深度推定の劣化がステレオSLAMに悪影響。 - 提案手法の限界や今後の課題についての具体的議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、陸上ステレオ深度推定ネットワーク、自己教師ありfinetuning、sim-to-real転移、水中SLAM、DVL/IMU融合SLAMが挙げられる。 - 同分野の定番として、stereo depth estimation、visual SLAM、underwater SLAM、sim-to-real transferの論文を読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Onur Bagoren, Seth Isaacson, Sacchin Sundar, Yung-Ching Sun, Anja Sheppard, Haoyu Ma, Abrar Shariff, Ram Vasudevan, Katherine A. Skinner

分類: cs.RO

原文アブストラクト

Localization and mapping are core perceptual capabilities for underwater robots. Stereo cameras provide a low-cost means of directly estimating metric depth to support these tasks. However, despite recent advances in stereo depth estimation on land, computing depth from image pairs in underwater scenes remains challenging. In underwater environments, images are degraded by light attenuation, visual artifacts, and dynamic lighting conditions. Furthermore, real-world underwater scenes frequently lack rich texture useful for stereo depth estimation and 3D reconstruction. As a result, stereo estimation networks trained on in-air data cannot transfer directly to the underwater domain. In addition, there is a lack of real-world underwater stereo datasets for supervised training of neural networks. Poor underwater depth estimation is compounded in stereo-based Simultaneous Localization and Mapping (SLAM) algorithms, making it a fundamental challenge for underwater robot perception. To address these challenges, we propose a novel framework that enables sim-to-real training of underwater stereo disparity estimation networks using simulated data and self-supervised finetuning. We leverage our learned depth predictions to develop SurfSLAM, a novel framework for real-time underwater SLAM that fuses stereo cameras with IMU, barometric, and Doppler Velocity Log (DVL) measurements. Lastly, we collect a challenging real-world dataset of shipwreck surveys using an underwater robot. Our dataset features over 24,000 stereo pairs, along with high-quality, dense photogrammetry models and reference trajectories for evaluation. Through extensive experiments, we demonstrate the advantages of the proposed training approach on real-world data for improving stereo estimation in the underwater domain and for enabling accurate trajectory estimation and 3D reconstruction of complex shipwreck sites.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI