スパイキングニューラルネットワークによる人とロボットの協働における早期ターンテイキング予測
Spiking Neural Networks for Early Prediction in Human Robot Collaboration
身体・神経・生理のマルチモーダル手がかりを用いたスパイキングニューラルネットワークで、手術助手ロボットが外科医のターンテイキング意図を早期に予測し、動作の10%完了時点でF1=0.683を達成した研究。
著者: Tian Zhou, Juan P. Wachs
分類: cs.RO, cs.HC
原文アブストラクト
This paper introduces the Turn-Taking Spiking Neural Network (TTSNet), which is a cognitive model to perform early turn-taking prediction about human or agent's intentions. The TTSNet framework relies on implicit and explicit multimodal communication cues (physical, neurological and physiological) to be able to predict when the turn-taking event will occur in a robust and unambiguous fashion. To test the theories proposed, the TTSNet framework was implemented on an assistant robotic nurse, which predicts surgeon's turn-taking intentions and delivers surgical instruments accordingly. Experiments were conducted to evaluate TTSNet's performance in early turn-taking prediction. It was found to reach a F1 score of 0.683 given 10% of completed action, and a F1 score of 0.852 at 50% and 0.894 at 100% of the completed action. This performance outperformed multiple state-of-the-art algorithms, and surpassed human performance when limited partial observation is given (< 40%). Such early turn-taking prediction capability would allow robots to perform collaborative actions proactively, in order to facilitate collaboration and increase team efficiency.
関連論文
- ARと触覚の複合インタフェースによる人とロボットの補完的協働フレームワークヒューマンロボット協働
- 人間とロボットの協働における能動的な説明可能計画の生成ヒューマンロボット協働
- 全身アドホック協働テストベッドFACTヒューマンロボット協働
- 拡張現実の仮想バリアによる製造業での安全で効果的な人とロボットの協働ヒューマンロボット協働
- 「取ってそこに置いて」:人とロボットの協働における明示的・暗黙的タスク割当手法の検討ヒューマンロボット協働
- ロボティクスが実現する労働力の拡張ヒューマンロボット協働
