日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

HRI/指差し認識arXiv:1902.02636

民生RGB-Dカメラによる指差しジェスチャ検出の実用化

Commodifying Pointing in HRI: Simple and Fast Pointing Gesture Detection from RGB-D Images

シェア:XThreadsFacebookLINEはてブBluesky

民生品のRGB-Dカメラと深層学習ベースの手・顔検出を組み合わせ、3D指差しベクトルを30Hz以上で推定する簡便な手法を提案し、モーションキャプチャとの比較で精度を評価した。

著者: Bita Azari, Angelica Lim, Richard T. Vaughan

分類: cs.RO

原文アブストラクト

We present and characterize a simple method for detecting pointing gestures suitable for human-robot interaction applications using a commodity RGB-D camera. We exploit a state-of-the-art Deep CNN-based detector to find hands and faces in RGB images, then examine the corresponding depth channel pixels to obtain full 3D pointing vectors. We test several methods of estimating the hand end-point of the pointing vector. The system runs at better than 30Hz on commodity hardware: exceeding the frame rate of typical RGB-D sensors. An estimate of the absolute pointing accuracy is found empirically by comparison with ground-truth data from a VICON motion-capture system, and the useful interaction volume established. Finally, we show an end-to-end test where a robot estimates where the pointing vector intersects the ground plane, and report the accuracy obtained. We provide source code as a ROS node, with the intention of contributing a commodity implementation of this common component in HRI systems.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI