日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

生理計測arXiv:2606.12378

照明変化に頑健なロボット用カメラ心拍計測

Illumination-Robust Camera-Based Heart-Rate Estimation for Physiological Sensing in Robots

シェア:XThreadsFacebookLINEはてブBluesky

ロボット搭載カメラでの心拍計測を照明変化に頑健にするため、空間時間トランスフォーマーと照明オーグメンテーションを組み合わせた新しい推定手法を提案した。

詳しい要約

1. どんなもの?

- RGBカメラ映像から非接触で心拍数(HR)を推定するrPPGの研究。 - ロボット搭載の視覚システムでの利用を想定し、照明変動に頑健な推定を目指す。 - 照明条件を変化させた新データセットを構築。 - 空間-時間transformerによるend-to-endフレームワークを提案。 - PRNetベースの3D顔アライメント、clip-level照明augmentation、Residual Temporal Standardization Module、hybrid temporal-frequency supervisionを統合。

2. 先行研究と比べてどこがすごい?

- 従来は照明変動がrPPGのロバスト展開の大きな障壁だった。 - 新データセット上でPhysFormerベースラインと比較。 - HR MAEを93.6%削減(0.79 bpm)。 - HR相関を0.088から0.982へ向上。 - 照明が変化する状況でも使用可能な精度を実現。

3. 技術・手法の肝は?

- 空間-時間transformerによるend-to-end推定。 - PRNetベースの3D顔アライメントを統合。 - clip-level illumination augmentationを適用。 - Residual Temporal Standardization Moduleを導入。 - 学習目的はSoft-Shifted Pearson波形損失とspectral Kullback-Leibler divergence損失の組み合わせ。 - 周波数領域のHRガイダンス寄与を重みβで調整。

4. どうやって有効だと検証した?

- 3つの照明レベルを網羅するstatic all-level mix protocolで実験。 - 複数のβ設定を比較し、β=5が最良。 - 最良実行でHR MAE 0.79 bpm、HR相関0.982を達成。 - PhysFormerベースラインと同一データセット上で比較評価。

5. 議論はある?

- 照明変動下でのロバスト性向上を示す一方、議論の詳細は要旨からは不明。 - βの最適値や他設定との差の要因は要旨からは不明。 - データセットの規模や被験者多様性への言及は要旨からは不明。 - ロボット実機での評価は要旨からは不明。

6. 次に読むべき論文は?

- PhysFormer(要旨で比較ベースラインとして参照)。 - PRNet(3D顔アライメントで参照)。 - rPPG分野の関連手法(一般的な同分野の定番)。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhi Wei Xu, Torbjörn E. M. Nordling

分類: cs.CV, cs.AI

原文アブストラクト

Physiological awareness is important for service, social, and assistive robots that interact with humans in everyday environments. Remote photoplethysmography (rPPG) enables non-contact heart-rate (HR) estimation from an RGB camera, making it a promising sensing modality for robot-mounted vision systems. However, illumination variation remains a major barrier to robust deployment. This paper presents an end-to-end spatial-temporal transformer framework for remote HR estimation on a new dataset with varied illumination. Our estimator integrates PRNet-based 3D face alignment, clip-level illumination augmentation, the Residual Temporal Standardization Module, and controlled hybrid temporal-frequency supervision. The training objective combines a Soft-Shifted Pearson waveform loss with a spectral Kullback-Leibler divergence loss, where a tuned weight ($\mathbfβ$) controls the contribution of frequency-domain heart-rate guidance. Experiments on a static all-level mix protocol covering three illumination levels show that $\mathbfβ=5$ provides the strongest result among the tested beta settings, achieving a best-run HR mean absolute error (MAE) of 0.79 bpm and an HR correlation of 0.982. Compared with the PhysFormer baseline evaluated on our dataset, our estimator reduces HR MAE by 93.6 %, while increasing HR correlation from 0.088 to 0.982, making it usable when illumination varies.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI