日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

行動認識arXiv:2507.22522

ロボット視点からの行動認識による自然な人間-ロボットインタラクション

Recognizing Actions from Robotic View for Natural Human-Robot Interaction

シェア:XThreadsFacebookLINEはてブBluesky

移動ロボット視点での人間行動認識のための大規模データセットACTIVEと、遠距離でも高精度に認識する手法ACTIVE-PCを提案した論文。

詳しい要約

1. どんなもの?

- N-HRI(Natural Human-Robot Interaction)向けの行動認識研究 - 移動型サービスロボット視点の大規模データセット ACTIVE を提案 - 30 の複合行動カテゴリ、80 名の参加者、46,868 の動画インスタンス - RGB と point cloud の両モダリティを収録 - 距離 3m〜50m、多様な環境、カメラ高さが変動する移動プラットフォーム - 併せて長距離行動認識手法 ACTIVE-PC を提案

2. 先行研究と比べてどこがすごい?

- 従来の行動認識ベンチマークは N-HRI の複雑さに対応できないと指摘 - データ量、モダリティ、タスクカテゴリ、被験者・環境の多様性が限定的 - ACTIVE はロボット視点・移動カメラ・長距離・多様環境を備えた点で従来と異なる - 具体的な先行研究名や数値比較は要旨からは不明

3. 技術・手法の肝は?

- ACTIVE-PC の構成要素 - Multilevel Neighborhood Sampling - Layered Recognizers - Elastic Ellipse Query - 人間の行動と kinematic interference の精密な decoupling - point cloud を用いて長距離の人間行動を認識 - 各要素の詳細なアルゴリズムは要旨からは不明

4. どうやって有効だと検証した?

- ACTIVE データセット上での実験により ACTIVE-PC の有効性を報告 - 具体的な精度・比較手法・実験設定は要旨からは不明 - コードは GitHub で公開(https://github.com/wangzy01/ACTIVE-Action-from-Robotic-View)

5. 議論はある?

- 要旨からは不明 - 想定される論点として長距離・移動カメラ・不均一地面下での認識難度が挙げられるが、議論の詳細は記載なし

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として point cloud 系行動認識(例: PointNet 系)や skeleton-based action recognition の定番研究 - N-HRI やロボット視点行動認識の関連ベンチマーク

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ziyi Wang, Peiming Li, Hong Liu, Zhichao Deng, Can Wang, Jun Liu, Junsong Yuan, Mengyuan Liu

分類: cs.CV, cs.AI, cs.RO

原文アブストラクト

Natural Human-Robot Interaction (N-HRI) requires robots to recognize human actions at varying distances and states, regardless of whether the robot itself is in motion or stationary. This setup is more flexible and practical than conventional human action recognition tasks. However, existing benchmarks designed for traditional action recognition fail to address the unique complexities in N-HRI due to limited data, modalities, task categories, and diversity of subjects and environments. To address these challenges, we introduce ACTIVE (Action from Robotic View), a large-scale dataset tailored specifically for perception-centric robotic views prevalent in mobile service robots. ACTIVE comprises 30 composite action categories, 80 participants, and 46,868 annotated video instances, covering both RGB and point cloud modalities. Participants performed various human actions in diverse environments at distances ranging from 3m to 50m, while the camera platform was also mobile, simulating real-world scenarios of robot perception with varying camera heights due to uneven ground. This comprehensive and challenging benchmark aims to advance action and attribute recognition research in N-HRI. Furthermore, we propose ACTIVE-PC, a method that accurately perceives human actions at long distances using Multilevel Neighborhood Sampling, Layered Recognizers, Elastic Ellipse Query, and precise decoupling of kinematic interference from human actions. Experimental results demonstrate the effectiveness of ACTIVE-PC. Our code is available at: https://github.com/wangzy01/ACTIVE-Action-from-Robotic-View.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI