AR/人間ロボット協調2025/9/1arXiv:2509.15507

STARC: 緊急対応における人間とロボットの協調のための壁越し拡張現実フレームワーク

STARC: See-Through-Wall Augmented Reality Framework for Human-Robot Collaboration in Emergency Response

ロボットのマッピングと救助隊員装着のLiDARを融合し、壁越しに人や危険をARで可視化するシステムを開発、実証した。

詳しい要約

1. どんなもの？

- 緊急対応ミッション向けの see-through AR フレームワーク STARC を提案 - 移動ロボットの mapping と responder 装着 LiDAR sensing を融合 - 遮蔽物越しに隠れた要救助者や危険物を AR で可視化し状況認識を向上 - 消防・災害救助など safety-critical 操作への応用を狙う

2. 先行研究と比べてどこがすごい？

- 要旨からは不明（先行研究との具体的比較は記述なし） - 特徴として cross-LiDAR alignment により responder 視点への一貫した first-person projection を実現 - 検出人物とその point clouds を低遅延 AR 描画する点を強調

3. 技術・手法の肝は？

- 地上ロボットが LiDAR-inertial odometry で大域探索と 3D human detection を実施 - responder の helmet/handheld 装着 LiDAR を relative pose estimation でロボットの global map に位置合わせ - この cross-LiDAR alignment が肝 - 検出人物と point clouds を responder 視野へ低遅延で AR 投影

4. どうやって有効だと検証した？

- simulation、lab setups、tactical field trials で実験 - robust な pose alignment、reliable な detections、stable な overlays を確認 - これらにより有効性を検証

5. 議論はある？

- 要旨からは不明（限界や課題の明示的議論は記述なし） - 想定応用として fire-fighting、disaster relief 等の safety-critical 操作を挙げる - code と design は採択後に open-source 化予定

6. 次に読むべき論文は？

- 要旨で参照・比較されている研究はなし - 関連手法として LiDAR-inertial odometry、3D human detection、relative pose estimation、AR overlay の各分野の定番研究を挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shenghai Yuan, Weixiang Guo, Tianxin Hu, Yu Yang, Jinyu Chen, Rui Qian, Zhongyuan Liu, Lihua Xie

分類: cs.RO

原文アブストラクト

In emergency response missions, first responders must navigate cluttered indoor environments where occlusions block direct line-of-sight, concealing both life-threatening hazards and victims in need of rescue. We present STARC, a see-through AR framework for human-robot collaboration that fuses mobile-robot mapping with responder-mounted LiDAR sensing. A ground robot running LiDAR-inertial odometry performs large-area exploration and 3D human detection, while helmet- or handheld-mounted LiDAR on the responder is registered to the robot's global map via relative pose estimation. This cross-LiDAR alignment enables consistent first-person projection of detected humans and their point clouds - rendered in AR with low latency - into the responder's view. By providing real-time visualization of hidden occupants and hazards, STARC enhances situational awareness and reduces operator risk. Experiments in simulation, lab setups, and tactical field trials confirm robust pose alignment, reliable detections, and stable overlays, underscoring the potential of our system for fire-fighting, disaster relief, and other safety-critical operations. Code and design will be open-sourced upon acceptance.

arXivで原文を読む →arXiv概要ページ

← 論文一覧