日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ソーシャルロボティクスarXiv:2507.14412

ウェルビーイング支援のためのエンドツーエンド音声言語モデルを活用した個別化ソーシャルアシスティブ・ロボット

Personalized Socially Assistive Robots With End-to-End Speech-Language Models For Well-Being Support

シェア:XThreadsFacebookLINEはてブBluesky

ソーシャルアシスティブ・ロボットにエンドツーエンドの音声言語モデルを統合し、ユーザー調査を通じて共感フィードバックや自然な会話の実現可能性と、非言語行動の同期や応答の多様性に関する課題を明らかにした。

詳しい要約

1. どんなもの?

- 本研究は、Socially Assistive Robots(SARs)のwell-being支援において、end-to-end speech-language models(SLMs)を統合することを提案する。 - 目的は、既存のSAR対話パイプラインの限界(real-time latency、back-channeling、personalized speech dialogue)を改善すること。 - 具体的には、SLM-enabled SAR dialogue systemのusabilityを小規模ユーザスタディで評価し、ユーザフィードバックから残るlimitationsを特定する。

2. 先行研究と比べてどこがすごい?

- 先行研究では、SARsの既存dialogue pipelinesがreal-time latency、back-channeling、personalized speech dialogueの面で限定的であると報告されている。 - 本研究は、integrated end-to-end SLMsをSARsに用いることで、これらの限界に対処する点が新しい。 - 従来のパイプラインではなく、end-to-end SLMによる対話生成をSARに適用するアプローチが特徴。

3. 技術・手法の肝は?

- integrated end-to-end speech-language models(SLMs)をSARsに組み込んだ対話システムを構築。 - 小規模なwithin-participant user studyを実施し、usabilityを評価。 - 参加者フィードバックを通じて、システムのlimitationsを特定する手法を採用。

4. どうやって有効だと検証した?

- 大学生(N = 11)を対象とした小規模within-participant user studyを実施。 - 参加者は、SLM-enabled SAR systemがempathetic feedback、natural turn-taking、back-channeling、adaptive responsesを提供できると知覚した。 - 一方で、robotのnonverbal behaviorsのvariabilityとconversationとのsynchronizationの欠如、SLMのverbal feedbackがgenericでrepetitiveであることも報告された。

5. 議論はある?

- 参加者から、robotのnonverbal behaviorsがvariabilityに欠け、会話とのsynchronizationが不足しているとの指摘。 - SLMのverbal feedbackがgenericでrepetitiveであるとのフィードバック。 - これらの知見から、conversationに同期したreal-time robot movement、mental health practicesに沿った出力のためのpromptingまたはfine-tuningの改善、よりexpressiveでadaptiveなvocal generationの必要性が示された。

6. 次に読むべき論文は?

- 要旨からは不明(参照/比較されている特定の研究は明示されていない)。 - 関連手法として、end-to-end speech-language models(SLMs)、Socially Assistive Robots(SARs)のdialogue pipelines、back-channeling、mental health practicesに基づく対話生成に関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mengxue Fu, Zhonghao Shi, Minyu Huang, Siqi Liu, Mina Kian, Yirui Song, Maja J. Matarić

分類: cs.RO

原文アブストラクト

Socially assistive robots (SARs) have shown great potential for supplementing well-being support. However, prior studies have found that existing dialogue pipelines for SARs remain limited in real-time latency, back-channeling, and personalized speech dialogue. Toward addressing these limitations, we propose using integrated end-to-end speech-language models (SLMs) with SARs. This work 1) evaluated the usability of an SLM-enabled SAR dialogue system through a small user study, and 2) identified remaining limitations through study user feedback to inform future improvements. We conducted a small within-participant user study with university students (N = 11) whose results showed that participants perceived an SLM-enabled SAR system as capable of providing empathetic feedback, natural turn-taking, back-channeling, and adaptive responses. We also found that participants reported the robot's nonverbal behaviors as lacking variability and synchronization with conversation, and the SLM's verbal feedback as generic and repetitive. These findings highlighted the need for real-time robot movement synchronized with conversation, improved prompting or fine-tuning to generate outputs better aligned with mental health practices, and more expressive, adaptive vocal generation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI