リアルタイムESFP:推定・平滑化・フィルタリング・姿勢マッピング
Real-Time ESFP: Estimating, Smoothing, Filtering, and Pose-Mapping
単眼RGB動画から低コスト4自由度デスクトップアームの関節軌道を生成するパイプラインを提案。骨格推定、Transformerによる平滑化、不確実性に基づくフィルタリング、幾何学的姿勢マッピングを統合。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Qifei Cui, Yuang Zhou, Ruichen Deng
分類: cs.CV, cs.RO
原文アブストラクト
This paper presents ESFP, an end-to-end pipeline that converts monocular RGB video into executable joint trajectories for a low-cost 4-DoF desktop arm. ESFP comprises four sequential modules. (1) Estimating: ROMP lifts each frame to a 24-joint 3-D skeleton. (2) Smoothing: the proposed HPSTM-a sequence-to-sequence Transformer with self-attention-combines long-range temporal context with a differentiable forward-kinematics decoder, enforcing constant bone lengths and anatomical plausibility while jointly predicting joint means and full covariances. (3) Filtering: root-normalized trajectories are variance-weighted according to HPSTM's uncertainty estimates, suppressing residual noise. (4) Pose-Mapping: a geometric retargeting layer transforms shoulder-elbow-wrist triples into the uArm's polar workspace, preserving wrist orientation.
