日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

特徴マッチングarXiv:2104.00680

LoFTR: Transformerによる検出器不要の局所特徴マッチング

LoFTR: Detector-Free Local Feature Matching with Transformers

シェア:XThreadsFacebookLINEはてブBluesky

画像特徴の検出・記述・マッチングを逐次行う代わりに、Transformerの自己・相互注意で粗い密マッチングを確立し細部で精緻化する手法を提案。低テクスチャ領域でも高精度にマッチングできる。

著者: Jiaming Sun, Zehong Shen, Yuang Wang, Hujun Bao, Xiaowei Zhou

分類: cs.CV, cs.RO

原文アブストラクト

We present a novel method for local image feature matching. Instead of performing image feature detection, description, and matching sequentially, we propose to first establish pixel-wise dense matches at a coarse level and later refine the good matches at a fine level. In contrast to dense methods that use a cost volume to search correspondences, we use self and cross attention layers in Transformer to obtain feature descriptors that are conditioned on both images. The global receptive field provided by Transformer enables our method to produce dense matches in low-texture areas, where feature detectors usually struggle to produce repeatable interest points. The experiments on indoor and outdoor datasets show that LoFTR outperforms state-of-the-art methods by a large margin. LoFTR also ranks first on two public benchmarks of visual localization among the published methods.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI