日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

HRIarXiv:2606.29937

REPAIR-Bench: ロボットのエラー知覚とインタラクション回復のためのベンチマーク

REPAIR-Bench: A Benchmark for Robot Error Perception And Interaction Recovery

シェア:XThreadsFacebookLINEはてブBluesky

人間とロボットのインタラクションにおける失敗の知覚と回復を評価するためのベンチマークを構築し、失敗検出、タイプ分類、回復予測の3つのタスクを提案した。

詳しい要約

1. どんなもの?

- ロボット失敗時のユーザー知覚と応答を理解するためのベンチマーク - 41名の参加者による214回のインタラクション試行から構築 - 4種類の誘発失敗タイプをカバー - 同期されたfacial action units、head pose、speech transcripts、事後affectとrecovery reportsを提供 - 3つの新規評価タスク:(i) 相互依存セッションでのfailure detection(縦断的適応をモデル化)、(ii) 二値成功/失敗を超えたvisual failure-type classification、(iii) ユーザー中心のrecovery prediction(手動設計やルールベースに依存せず、インタラクション文脈から好みの回復戦略を推論)

2. 先行研究と比べてどこがすごい?

- 先行研究は失敗を独立事象として扱うことが多い - 二値のfailure detectionを強調 - ルールベースのrecovery modelingを用いる - 本ベンチマークは相互依存セッションでのfailure detectionを縦断的にモデル化 - 二値ではなくvisual failure-type classificationを導入 - ユーザー中心のrecovery predictionを実現し、手動設計やルールベースに依存しない

3. 技術・手法の肝は?

- 階層的recurrent modelingをfailure detectionに適用 - 単一セッションモデルより改善(strict F1: 0.80 vs. 0.68) - failure localizationのmean signed error -0.51 s、median absolute error 2.97 s - recovery predictionにはQLoRAでファインチューニングしたMistral-7Bを使用 - Hit@5=0.76、F1@5=0.32を達成

4. どうやって有効だと検証した?

- 214回のインタラクション試行、41名の参加者によるデータでベースライン実験 - 階層的recurrent modelingが単一セッションモデルよりfailure detectionで優れることを確認 - failure localizationの誤差指標を報告 - QLoRAチューニング済みMistral-7Bのrecovery prediction性能をHit@5とF1@5で評価

5. 議論はある?

- 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 同分野の定番としてhuman-robot interaction (HRI)におけるfailure detection、recovery modeling、affective computing、facial action units、head pose、speech transcriptsを用いたマルチモーダル研究が挙げられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Giuliano Pioldi, Yashika Batra, Arman Ibrayeva, Yuanchen Bai, Purnjay Maruur, Promise Ekpo, Angelique Taylor

分類: cs.RO

原文アブストラクト

Understanding how users perceive and respond to robot failures is essential for building robust and trustworthy robot systems. Prior work, however, (i) often treats failures as independent events, (ii) emphasizes binary failure detection, (iii) with rule-based recovery modeling. We present REPAIR-Bench, built on 214 interaction trials from 41 participants, the benchmark spans four induced failure types and provides synchronized facial action units, head pose, speech transcripts, and post-interaction affect and recovery reports. The benchmark spans three novel evaluation tasks that jointly capture the lifecycle of failure in human-robot interaction (HRI): (i) failure detection over inter-dependent interaction sessions, modeling longitudinal user adaptation across repeated failures; (ii) visual failure-type classification beyond binary success/failure formulations; and (iii) user-centered recovery prediction, inferring users' preferred recovery strategies from interaction context rather than relying on manually designed or rule-based strategies. In baseline experiments, hierarchical recurrent modeling improved failure detection over a single-session model (strict F1: 0.80 vs. 0.68), achieved a failure localization mean signed error of -0.51 s, median absolute error of 2.97 s and, for recovery prediction, a QLoRA-tuned Mistral-7B reached Hit@5=0.76 and F1@5=0.32. REPAIR-Bench provides both the HRI and Medical HRI communities with a standardized framework for (1) evaluating robot failures and (2) building transparent, adaptive, and trustworthy recovery systems.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI