日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

触覚arXiv:2508.07839

触覚が語り、音が感じる:ロボットから人への感情的・社会的触覚のマルチモーダルアプローチ

Touch Speaks, Sound Feels: A Multimodal Approach to Affective and Social Touch from Robots to Humans

シェア:XThreadsFacebookLINEはてブBluesky

振動モーターと音を同期させたマルチモーダルシステムで、ロボットが触覚と音の組み合わせにより感情や社会的ジェスチャーを伝える手法を検証した。

詳しい要約

1. どんなもの?

- ロボットから人へのaffective/social touchを対象としたmultimodal interaction systemの研究 - 5*5 gridの25個のvibration motorsとaudio playbackを同期させ、haptic-audio刺激を提示 - 10種類のemotionと6種類のsocial gestureを、vibration単独・sound単独・両者の組み合わせで提示 - 32名のChinese participantsがarousalとvalenceを評定 - affective tactile interactionをhuman-robot interactionで扱う基礎的検討

2. 先行研究と比べてどこがすごい?

- 従来のrobot emotion表現研究はfacial expressionsやspeechが中心で、touchによるsocial gestureやemotion伝達は十分に検討されていなかった - 本研究はhapticとauditoryを同期したmultimodal提示によりこのgapに対応 - 単一modalityとの比較で、combined haptic-audio modalityがdecoding accuracyを有意に向上させることを示した点が特徴

3. 技術・手法の肝は?

- 5*5 gridに配置した25個のvibration motorsとaudio playbackを同期させるmultimodal interaction systemを開発 - 10 emotionsと6 social gesturesを、vibration・sound・その組み合わせの3条件で提示 - 参加者が各刺激のarousalとvalenceを評定する実験デザイン - 単一modalityとcombined modalityの比較により、各channelの寄与を検討

4. どうやって有効だと検証した?

- 32名のChinese participantsを対象とした実験で検証 - 10 emotionsと6 social gesturesをvibration・sound・組み合わせで提示し、arousal/valence評定を取得 - 結果として、combined haptic-audio modalityが単一modalityよりdecoding accuracyを有意に向上 - vibrationとsoundはそれぞれ特定のemotion認識を支持し、emotion表現により優位性が異なることを確認 - gesture単独では明確に区別可能なemotion伝達には一般に不十分

5. 議論はある?

- multisensory integrationがaffective human-robot interactionで重要であることを強調 - hapticとauditory cuesがemotional communicationを補完する役割を持つと議論 - gesture単独のemotion伝達力の限界を示唆 - 実験参加者がChinese participantsに限定されている点や、他文化・他文脈への一般化については要旨からは不明

6. 次に読むべき論文は?

- affective tactile interactionやmultisensory integrationに関する先行研究(要旨では個別論文名の参照なし) - robotのfacial expressionsやspeechによるemotion表現の研究 - haptic-audio synchronizationを用いたhuman-robot interaction研究 - social touchやaffective touchの認知・知覚研究(同分野の定番領域)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qiaoqiao Ren, Tony Belpaeme

分類: cs.RO

原文アブストラクト

Affective tactile interaction constitutes a fundamental component of human communication. In natural human-human encounters, touch is seldom experienced in isolation; rather, it is inherently multisensory. Individuals not only perceive the physical sensation of touch but also register the accompanying auditory cues generated through contact. The integration of haptic and auditory information forms a rich and nuanced channel for emotional expression. While extensive research has examined how robots convey emotions through facial expressions and speech, their capacity to communicate social gestures and emotions via touch remains largely underexplored. To address this gap, we developed a multimodal interaction system incorporating a 5*5 grid of 25 vibration motors synchronized with audio playback, enabling robots to deliver combined haptic-audio stimuli. In an experiment involving 32 Chinese participants, ten emotions and six social gestures were presented through vibration, sound, or their combination. Participants rated each stimulus on arousal and valence scales. The results revealed that (1) the combined haptic-audio modality significantly enhanced decoding accuracy compared to single modalities; (2) each individual channel-vibration or sound-effectively supported certain emotions recognition, with distinct advantages depending on the emotional expression; and (3) gestures alone were generally insufficient for conveying clearly distinguishable emotions. These findings underscore the importance of multisensory integration in affective human-robot interaction and highlight the complementary roles of haptic and auditory cues in enhancing emotional communication.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI