日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

HRI/不確実性評価arXiv:2603.10061

人間とロボットのインタラクションのための視覚言語モデルに基づく早期行動予測における意思決定を考慮した不確実性評価

Decision-Aware Uncertainty Evaluation of Vision-Language Model-Based Early Action Anticipation for Human-Robot Interaction

シェア:XThreadsFacebookLINEはてブBluesky

本論文は、人間とロボットの共有作業空間において、部分的な観測から行動を予測する際の視覚言語モデルの不確実性を初めて体系的に評価し、時間的前置き評価プロトコルとキャリブレーション指標を導入した。

詳しい要約

1. どんなもの?

- 共有作業空間のロボットが、部分的で曖昧な観測から人間の行動を早期予測する課題を扱う。 - egocentric視点では視点変化やocclusionにより知覚ノイズと曖昧さが増大する。 - 下流のhuman-robot interactionモジュールには行動仮説だけでなく、部分観測下での信頼できるconfidence推定が必要。 - vision-language modelベースの短期行動認識の不確実性信頼性を、temporal-prefix領域で初めて体系的に評価する。

2. 先行研究と比べてどこがすごい?

- 近年のvision-language modelベース手法はopen-vocabularyとcontext-aware reasoningにより短期行動認識に提案されている。 - しかしtemporal-prefix regimeにおける不確実性信頼性はほとんど特徴づけられていない。 - 本研究はhuman-robot interaction向けvision-language modelベース短期行動認識の不確実性を初めて体系的に評価する点が新しい。

3. 技術・手法の肝は?

- temporal-prefix evaluation protocolを導入する。 - calibrationとselective predictionのためのmetricsを導入する。 - 部分観測下でのmiscalibration patternsとfailure modesを特徴づける。 - 具体的なモデル名やデータセット名は要旨からは不明。

4. どうやって有効だと検証した?

- temporal-prefix evaluation protocolとcalibration・selective prediction metricsにより評価する。 - 部分観測下でのmiscalibration patternsとfailure modesを特徴づける。 - 具体的な実験設定やデータセットは要旨からは不明。

5. 議論はある?

- 部分観測下では過信的な早期予測が不安全または破壊的なinteractionを招く可能性がある。 - egocentric視点では視点変化とocclusionが知覚ノイズと曖昧さを増大させる。 - vision-language model予測をconfidence-gated human-robot interactionモジュールで使うには、欠けていたreliability evidenceを提供する。 - 具体的な限界や反論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 同分野の定番としてvision-language modelベースのaction anticipation、uncertainty calibration、selective prediction、human-robot interactionに関する研究が挙げられる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhaoda Du, Michael Bowman, Qiaojie Zheng, Xiaoli Zhang

分類: cs.RO

原文アブストラクト

Robots in shared workspaces must interpret human actions from partial, ambiguous observations, where overconfident early predictions can lead to unsafe or disruptive interaction. This challenge is amplified in egocentric views, where viewpoint changes and occlusions increase perceptual noise and ambiguity. As a result, downstream human-robot interaction modules require not only an action hypothesis but also a trustworthy estimate of confidence under partial observation. Recent vision-language model-based approaches have been proposed for short-term action recognition due to their open-vocabulary and context-aware reasoning, but their uncertainty reliability in the temporal-prefix regime is largely uncharacterized. We present the first systematic evaluation of uncertainty in vision-language model-based short-term action recognition for human-robot interaction. We introduce a temporal-prefix evaluation protocol and metrics for calibration and selective prediction. We also characterize miscalibration patterns and failure modes under partial observations. Our study provides the missing reliability evidence needed to use vision-language model predictions in confidence-gated human-robot interaction modules.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI