日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

SLAM/再ローカリゼーションarXiv:2205.05861

S3E-GNN:グラフニューラルネットワークを用いたスパース空間シーン埋め込みによるカメラ再ローカリゼーション

S3E-GNN: Sparse Spatial Scene Embedding with Graph Neural Networks for Camera Relocalization

シェア:XThreadsFacebookLINEはてブBluesky

RGB画像を埋め込みコードに変換し、ポーズグラフとGNNで照合することで、カメラの自己位置を高精度に再推定する学習ベース手法を提案した論文。

著者: Ran Cheng, Xinyu Jiang, Yuan Chen, Lige Liu, Tao Sun

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

Camera relocalization is the key component of simultaneous localization and mapping (SLAM) systems. This paper proposes a learning-based approach, named Sparse Spatial Scene Embedding with Graph Neural Networks (S3E-GNN), as an end-to-end framework for efficient and robust camera relocalization. S3E-GNN consists of two modules. In the encoding module, a trained S3E network encodes RGB images into embedding codes to implicitly represent spatial and semantic embedding code. With embedding codes and the associated poses obtained from a SLAM system, each image is represented as a graph node in a pose graph. In the GNN query module, the pose graph is transformed to form a embedding-aggregated reference graph for camera relocalization. We collect various scene datasets in the challenging environments to perform experiments. Our results demonstrate that S3E-GNN method outperforms the traditional Bag-of-words (BoW) for camera relocalization due to learning-based embedding and GNN powered scene matching mechanism.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI