日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

センサフュージョンarXiv:1908.00524

2Dレーザーと単眼カメラの深層融合によるリアルタイムオドメトリ推定

Deep Sensor Fusion for Real-Time Odometry Estimation

シェア:XThreadsFacebookLINEはてブBluesky

CNNを用いて2Dレーザースキャナと単眼カメラのデータをキャリブレーション不要で融合し、連続フレーム間の回転・並進を順序分類問題として推定するリアルタイムオドメトリ手法を提案した。

著者: Michelle Valente, Cyril Joly, Arnaud de La Fortelle

分類: cs.RO, cs.CV

原文アブストラクト

Cameras and 2D laser scanners, in combination, are able to provide low-cost, light-weight and accurate solutions, which make their fusion well-suited for many robot navigation tasks. However, correct data fusion depends on precise calibration of the rigid body transform between the sensors. In this paper we present the first framework that makes use of Convolutional Neural Networks (CNNs) for odometry estimation fusing 2D laser scanners and mono-cameras. The use of CNNs provides the tools to not only extract the features from the two sensors, but also to fuse and match them without needing a calibration between the sensors. We transform the odometry estimation into an ordinal classification problem in order to find accurate rotation and translation values between consecutive frames. Results on a real road dataset show that the fusion network runs in real-time and is able to improve the odometry estimation of a single sensor alone by learning how to fuse two different types of data information.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI