日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

HRI音声arXiv:2506.15107

聞かれていると分かっている:HRIのための適応型音声

I Know You're Listening: Adaptive Voice for HRI

シェア:XThreadsFacebookLINEはてブBluesky

言語教育ロボット向けに、絵文字プロンプトで表現力豊かな軽量TTS音声を生成し、周囲の騒音に応じてピッチを適応させ、L2学習者に聞き取りやすい英語音声を実現した研究。

詳しい要約

1. どんなもの?

- 社会的ロボットによる語学教育のための、タスク特化型合成音声(voice)の研究。 - 言語教育は音声タスクであるにもかかわらず、L2 teaching robot 向けの音声設計は限られていた。 - 3つの貢献からなる。 - 軽量で表現力のある robot voice の構築。 - 物理的・社会的 ambient environment への音声適応。 - L2 聴取者向けの明瞭性を高めた英語 TTS システム。

2. 先行研究と比べてどこがすごい?

- 先行研究では social robots の language teaching は検討されてきたが、タスク特化型の合成音声の検討は限定的だった。 - 本研究は L2 teaching robot の voice の欠落に対処する点が新しい。 - 軽量・リアルタイム動作と表現力、環境適応、L2 明瞭性を組み合わせる点が先行研究と異なる。 - 具体的な比較対象の研究名は要旨からは不明。

3. 技術・手法の肝は?

- Matcha-TTS を fine-tune して軽量かつ表現力のある voice を構築。 - emoji prompting により時間的に多様な expressivity を実現。 - 限られた計算資源で real time 動作が可能。 - 騒がしい・高エネルギーの環境では pitch と pitch rate を上げ、環境への awareness を演出。 - L2 聴取者向けに、英語の tense (long) / lax (short) vowel の duration cue をデータ駆動・知覚ベースで分析。 - tense vowel を lengthening し lax vowel は変えない “L2 clarity mode” を Matcha-TTS に実装。

4. どうやって有効だと検証した?

- case studies により、voice がより expressive、socially appropriate、長い表現的発話(例: storytelling)に適すると確認。 - 騒音・高エネルギー環境で pitch と pitch rate を上げると、robot voice がより appropriate で環境を認識しているように見えると確認。 - L2 聴取者では vowel duration が知覚に強く影響することを確認。 - clarity mode は base Matcha-TTS より respectful、intelligible、encouraging で、難しい tense/lax minimal pairs の transcription errors を低減。

5. 議論はある?

- 要旨からは不明。 - ただし case studies ベースの評価が中心であり、大規模な被験者実験や長期運用の議論は要旨に明示されていない。 - 環境適応の pitch/pitch rate 操作が実際の学習効果に与える影響は要旨からは不明。

6. 次に読むべき論文は?

- Matcha-TTS (本研究の base model)。 - social robots を用いた language teaching の先行研究(具体的な論文名は要旨からは不明)。 - L2 音声知覚における vowel duration cues に関する研究(具体的な論文名は要旨からは不明)。 - emoji prompting を用いた expressive TTS の関連研究(具体的な論文名は要旨からは不明)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Paige Tuttösí

分類: cs.RO, cs.HC, cs.SD, eess.AS

原文アブストラクト

While the use of social robots for language teaching has been explored, there remains limited work on a task-specific synthesized voices for language teaching robots. Given that language is a verbal task, this gap may have severe consequences for the effectiveness of robots for language teaching tasks. We address this lack of L2 teaching robot voices through three contributions: 1. We address the need for a lightweight and expressive robot voice. Using a fine-tuned version of Matcha-TTS, we use emoji prompting to create an expressive voice that shows a range of expressivity over time. The voice can run in real time with limited compute resources. Through case studies, we found this voice more expressive, socially appropriate, and suitable for long periods of expressive speech, such as storytelling. 2. We explore how to adapt a robot's voice to physical and social ambient environments to deploy our voices in various locations. We found that increasing pitch and pitch rate in noisy and high-energy environments makes the robot's voice appear more appropriate and makes it seem more aware of its current environment. 3. We create an English TTS system with improved clarity for L2 listeners using known linguistic properties of vowels that are difficult for these listeners. We used a data-driven, perception-based approach to understand how L2 speakers use duration cues to interpret challenging words with minimal tense (long) and lax (short) vowels in English. We found that the duration of vowels strongly influences the perception for L2 listeners and created an "L2 clarity mode" for Matcha-TTS that applies a lengthening to tense vowels while leaving lax vowels unchanged. Our clarity mode was found to be more respectful, intelligible, and encouraging than base Matcha-TTS while reducing transcription errors in these challenging tense/lax minimal pairs.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI