日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

生成モデルarXiv:2410.05869

見えざるものを見る:生成モデルによる未観測物体検出

Believing is Seeing: Unobserved Object Detection using Generative Models

シェア:XThreadsFacebookLINEはてブBluesky

画像に写っていない遮蔽物やフレーム外の物体位置を予測する新タスクを提案し、拡散モデルや視覚言語モデルなどの生成モデルを適用してその有効性を示した。

著者: Subhransu S. Bhattacharjee, Dylan Campbell, Rahul Shome

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

Can objects that are not visible in an image -- but are in the vicinity of the camera -- be detected? This study introduces the novel tasks of 2D, 2.5D and 3D unobserved object detection for predicting the location of nearby objects that are occluded or lie outside the image frame. We adapt several state-of-the-art pre-trained generative models to address this task, including 2D and 3D diffusion models and vision-language models, and show that they can be used to infer the presence of objects that are not directly observed. To benchmark this task, we propose a suite of metrics that capture different aspects of performance. Our empirical evaluation on indoor scenes from the RealEstate10k and NYU Depth v2 datasets demonstrate results that motivate the use of generative models for the unobserved object detection task.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI