日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

参照表現生成arXiv:1904.07165

実環境向けの曖昧さのない空間参照表現の生成学習

Learning to Generate Unambiguous Spatial Referring Expressions for Real-World Environments

シェア:XThreadsFacebookLINEはてブBluesky

深層学習で物体間の空間関係を推定し、自然で曖昧さのない参照表現を生成する2段階手法を提案し、類似物体が多い環境でも従来法より正確で好まれる表現を生成できることを示した。

著者: Fethiye Irmak Doğan, Sinan Kalkan, Iolanda Leite

分類: cs.RO, cs.CV

原文アブストラクト

Referring to objects in a natural and unambiguous manner is crucial for effective human-robot interaction. Previous research on learning-based referring expressions has focused primarily on comprehension tasks, while generating referring expressions is still mostly limited to rule-based methods. In this work, we propose a two-stage approach that relies on deep learning for estimating spatial relations to describe an object naturally and unambiguously with a referring expression. We compare our method to the state of the art algorithm in ambiguous environments (e.g., environments that include very similar objects with similar relationships). We show that our method generates referring expressions that people find to be more accurate ($\sim$30% better) and would prefer to use ($\sim$32% more often).

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI