日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ジェスチャー認識arXiv:1905.08685

ジェスチャー操作ロボットのための改良オプティカルフロー推定

Improved Optical Flow for Gesture-based Human-robot Interaction

シェア:XThreadsFacebookLINEはてブBluesky

深層学習ベースのオプティカルフロー推定に特徴抽出器の強化・輪郭への注意・中間特徴の活用という改良を加え、ジェスチャー認識精度と速度のバランスを向上させた。家庭用サービスロボット向けの新データセットMIBURIも構築した。

著者: Jen-Yen Chang, Antonio Tejero-de-Pablos, Tatsuya Harada

分類: cs.HC, cs.CV, cs.RO

原文アブストラクト

Gesture interaction is a natural way of communicating with a robot as an alternative to speech. Gesture recognition methods leverage optical flow in order to understand human motion. However, while accurate optical flow estimation (i.e., traditional) methods are costly in terms of runtime, fast estimation (i.e., deep learning) methods' accuracy can be improved. In this paper, we present a pipeline for gesture-based human-robot interaction that uses a novel optical flow estimation method in order to achieve an improved speed-accuracy trade-off. Our optical flow estimation method introduces four improvements to previous deep learning-based methods: strong feature extractors, attention to contours, midway features, and a combination of these three. This results in a better understanding of motion, and a finer representation of silhouettes. In order to evaluate our pipeline, we generated our own dataset, MIBURI, which contains gestures to command a house service robot. In our experiments, we show how our method improves not only optical flow estimation, but also gesture recognition, offering a speed-accuracy trade-off more realistic for practical robot applications.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI