日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

音声合成/キャラクターarXiv:2610.18669

既知声のクローニングと性格転移の限界:キャラクターデザインへの応用

Known-Voice Cloning and the Limits of Personality Transfer for Character Design

シェア:XThreadsFacebookLINEはてブBluesky

身近な人物の声をクローンして仮想キャラクターに話させても、その人物の性格印象は一貫して転移しないことを2つの実験で示した。

詳しい要約

1. どんなもの?

- ゼロショット音声クローニングで再現した既知の声を仮想キャラクターに付与した際、人格印象が転移するかを検討。 - 研究1: 大学生が既知の講師のクローン声を聞く実世界実験。 - 研究2: SNSクリエイターとそのコミュニティ成員の声を用いたオンライン実験。 - 結果: 人格転移の証拠は限定的で、効果は選択的かつ文脈依存。 - 知覚された人工性や声と外見の適合性が判断に影響。

2. 先行研究と比べてどこがすごい?

- 先行研究は主に親近感やパーソナライゼーション効果を調べ、人格印象の転移を直接検証していない。 - 本研究は、身体化された仮想キャラクターへの人格印象転移を直接テスト。 - クローン声が人を操作し、人工キャラクターを有能な社会的行為者と見なさせるという懸念に対し、限定的な証拠を提示。 - 先行研究の知見を調整し、過度な一般化を戒める。

3. 技術・手法の肝は?

- 2つの研究で、既知の人物のクローン声を仮想キャラクターに付与。 - 研究1: 実世界の大学環境で、参加学生に馴染みの講師の声を使用。 - 研究2: オンラインでSNSクリエイターとコミュニティ成員の声を使用。 - 概念枠組み: identity activation, trait transfer, person reconstruction。 - 定量的・定性的に人格印象を評価。

4. どうやって有効だと検証した?

- 研究1と研究2の両方で、人格印象の転移を検証。 - 結果: 人格転移の証拠は限定的で、効果は特性や研究文脈を超えて一般化しなかった。 - オンライン研究では、声のidentity cuesが話者への期待を活性化するが、広範な人物印象の再構成には至らない。 - 定性的回答から、人工性の知覚や声と外見の適合性が判断に影響することが示唆された。

5. 議論はある?

- クローン声が人を操作し、人工キャラクターを有能な社会的行為者と知覚させるという一般的懸念を緩和。 - 効果は選択的で、特性や文脈を超えて一般化しない。 - 知覚された人工性と声と外見の適合性が判断を形成。 - 人格転移の限界と条件について議論の余地。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法: zero-shot voice cloning, identity activation, trait transfer, person reconstruction。 - 同分野の定番: 音声クローニングと社会的知覚に関する研究、virtual character designに関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Johanna Magdalena Kuch, Maud van Lier, Daksitha Senel Withanage Don, Patrick Gebhard, Tanja Schneeberger, Elisabeth André

分類: cs.CL, cs.AI, cs.HC, cs.RO

原文アブストラクト

Recent advances in zero-shot voice cloning systems make it possible to reproduce a recognizable voice from a short recording and attach it to arbitrary virtual characters. Prior work suggests that familiar vocal identity can carry over associated personality impressions to new targets such as robots or virtual characters. However, these works have mainly examined familiarity and personalization effects rather than directly testing whether a cloned familiar voice systematically transfers personality impressions to an embodied virtual character. Such transference raises the concern that cloned voices could be used to manipulate people into engaging with virtual characters as capable social actors. Across two studies, we investigated whether personality impressions transfer when a virtual character speaks with the cloned voice of a familiar person. Study 1 examined this question in a real-world university setting using the cloned voice of a lecturer familiar to the participating students. Study 2 examined the same question online using voices of social media content creators and members of their communities. Drawing on the concepts of identity activation, trait transfer, and person reconstruction, we show that evidence of personality transfer was limited in both studies. Observed effects were selective and did not generalize across traits or study contexts. In the online study in particular, recognizable voice identity cues activated expectations about the speaker but did not reconstruct the broader person impression. Qualitative responses further indicated that judgments were frequently shaped by perceived artificiality and by whether voice and appearance fit together. Our findings moderate common concerns that cloned voices straightforwardly manipulate people into perceiving artificial characters as capable social actors.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI