人間とロボットの協調作業における指示ジェスチャによるターゲット選択の評価
Evaluating Pointing Gestures for Target Selection in Human-Robot Collaboration
RGB-D映像から姿勢推定と肩-手首の伸展に基づく幾何モデルを用いて指示対象を平面作業空間内で特定する手法を提案し、物体検出・音声認識・音声合成を統合した概念実証システムで評価した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Noora Sassali, Roel Pieters
分類: cs.RO, cs.CV
原文アブストラクト
Pointing gestures are a common interaction method used in Human-Robot Collaboration for various tasks, ranging from selecting targets to guiding industrial processes. This study introduces a method for localizing pointed targets within a planar workspace. The approach employs pose estimation, and a simple geometric model based on shoulder-wrist extension to extract gesturing data from an RGB-D stream. The study proposes a rigorous methodology and comprehensive analysis for evaluating pointing gestures and target selection in typical robotic tasks. In addition to evaluating tool accuracy, the tool is integrated into a proof-of-concept robotic system, which includes object detection, speech transcription, and speech synthesis to demonstrate the integration of multiple modalities in a collaborative application. Finally, a discussion over tool limitations and performance is provided to understand its role in multimodal robotic systems. All developments are available at: https://github.com/NMKsas/gesture_pointer.git.
関連論文
- 人間-ロボット間の受け渡しを通じた上肢機能的移動能力の能動的知覚人間ロボット協調
- 人間とロボットの協調における人間フィードバック強化学習のスコーピングレビューと実験研究人間ロボット協調
- 人間とロボットの協調組立における解釈可能な認知作業負荷評価のための注意と行動手がかりを統合した視覚ベースフレームワーク人間ロボット協調
- すべての一致が裏付けとなるわけではない:人間とロボットの協調における型付き行動受理のための来歴保存型多視点融合人間ロボット協調
- 隠れた目標下でのゼロショット人間ロボット協調のための構造化LLM推論人間ロボット協調
- 人間とロボットのチーム成功のための能動的信頼管理:信頼修復から信頼充足の視点へ人間ロボット協調
