Pepperロボットによる手話コミュニケーション支援
Using the Pepper Robot to Support Sign Language Communication
商用ソーシャルロボットPepperにイタリア手話(LIS)の52種類のサインを実装し、ろう者・聴者12名を対象に認識実験を行った結果、単語単位では多くが正しく認識されたが、文単位ではロボットの関節可動域や時間的制約により認識率が低下した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Giulia Botta, Marco Botta, Cristina Gena, Alessandro Mazzei, Massimo Donini, Alberto Lillo
分類: cs.RO, cs.HC
原文アブストラクト
Social robots are increasingly experimented in public and assistive settings, but their accessibility for Deaf users remains quite underexplored. Italian Sign Language (LIS) is a fully-fledged natural language that relies on complex manual and non-manual components. Enabling robots to communicate using LIS could foster more inclusive human robot interaction, especially in social environments such as hospitals, airports, or educational settings. This study investigates whether a commercial social robot, Pepper, can produce intelligible LIS signs and short signed LIS sentences. With the help of a Deaf student and his interpreter, an expert in LIS, we co-designed and implemented 52 LIS signs on Pepper using either manual animation techniques or a MATLAB based inverse kinematics solver. We conducted a exploratory user study involving 12 participants proficient in LIS, both Deaf and hearing. Participants completed a questionnaire featuring 15 single-choice video-based sign recognition tasks and 2 open-ended questions on short signed sentences. Results shows that the majority of isolated signs were recognized correctly, although full sentence recognition was significantly lower due to Pepper's limited articulation and temporal constraints. Our findings demonstrate that even commercially available social robots like Pepper can perform a subset of LIS signs intelligibly, offering some opportunities for a more inclusive interaction design. Future developments should address multi-modal enhancements (e.g., screen-based support or expressive avatars) and involve Deaf users in participatory design to refine robot expressivity and usability.
関連論文
- 認知症の見当識障害検出と介護者支援介入のための在宅ソーシャルロボット設計に関するステークホルダー洞察ソーシャルロボット
- 自閉症成人の社会的認知トレーニングのためのソーシャルロボット設計ソーシャルロボット
- 感情ループを閉じる:マルチモーダルな話者・聞き手の感情ダイナミクスを考慮した共感型ソーシャルロボットソーシャルロボット
- 子どもの包括的なウェルビーイング評価のためのソーシャルロボット設計:発達性言語障害と強制移住を支援するコミュニティからの洞察ソーシャルロボット
- 子どものウェルビーイングのためのパーソナライズ型ソーシャルロボット:レコメンダーシステムの視点からのデータ要件原則ソーシャルロボット
- ロボット媒介応用演劇の美学:REMindを事例としてソーシャルロボット
