日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ベンチマークarXiv:2606.01848

RescueBench: 具身エージェントは現実世界で命を救えるか?

RescueBench: Can Embodied Agents Save Lives in the Wild ?

シェア:XThreadsFacebookLINEはてブBluesky

捜索救助タスクを4段階のパイプラインとして構成した写真リアルな診断ベンチマークを提案し、既存手法の失敗モードを段階別に分析した。

詳しい要約

1. どんなもの?

- RescueBenchは、Search-and-Rescue (SAR) を対象としたフォトリアリスティックな診断ベンチマーク。 - SARを4段階のパイプライン(multimodal exploration, target rescue, memory-guided return, final handoff)としてインスタンス化。 - 5段階の難易度レベルがあり、環境複雑性、手がかりの曖昧さ、空間階層が変化。 - 自動エピソード生成とアノテーションパイプラインを備え、スケーラブルな評価と訓練を可能にする。

2. 先行研究と比べてどこがすごい?

- 既存ベンチマークはSARの能力を個別に評価することが多く、現実的なワークフローでの複合的な失敗を不明瞭にしていた。 - RescueBenchは逐次タスク構成と段階的評価を組み合わせ、探索と記憶の失敗がどのように伝播するかを分析可能。 - 7つのベースライン、オラクル参照、人間プレイヤーを評価し、最高難易度ではベースラインが完全にタスクを完了できないことを示した。

3. 技術・手法の肝は?

- 4段階のパイプライン(multimodal exploration, target rescue, memory-guided return, final handoff)を逐次的に構成。 - 段階レベルの評価により、各段階での失敗を診断。 - 5段階の難易度レベルで環境複雑性、手がかりの曖昧さ、空間階層を変化させる。 - 自動エピソード生成とアノテーションパイプラインを開発。

4. どうやって有効だと検証した?

- 7つのベースライン、オラクル参照、人間プレイヤーを評価。 - 最高難易度ではベースラインが完全なタスクを完了できないことを示した。 - 段階レベルの診断により、自律探索が主要な失敗モードであり、空間記憶が第二の独立したボトルネックであることを特定。 - 現在のトポロジカル視覚言語ナビゲーションやマップベース手法ではこれらの制限が解決されないことを示唆。

5. 議論はある?

- 段階レベルの診断により、探索と記憶の失敗が複合することを明らかにした。 - 自律探索が支配的な失敗モードであり、空間記憶が独立したボトルネックであると指摘。 - 現在のトポロジカル視覚言語ナビゲーションやマップベース手法ではこれらの制限が解決されないことを示唆。 - その他の議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法は明示されていない。 - 同分野の定番として、Embodied AI, Visual-Language Navigation (VLN), Search-and-Rescue (SAR) ベンチマーク、トポロジカル視覚言語ナビゲーション、マップベース手法などが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kui Wu, Beiyu Guo, Hao Chen, ShuHang Xu, Yuling Li, Yongdan Zeng, Zhoujun Li, Yizhou Wang, Fangwei Zhong

分類: cs.CV

原文アブストラクト

Search-and-rescue (SAR) requires embodied agents to explore unfamiliar environments under multimodal uncertainty, perform multi-stage interactions, and retrieve spatial memory over long horizons. Existing benchmarks typically evaluate these capabilities in isolation, leaving unclear how failures compound when they must be composed in realistic workflows. We introduce RescueBench, a photo-realistic diagnostic benchmark that instantiates SAR as a four-stage pipeline: multimodal exploration, target rescue, memory-guided return, and final handoff. By combining sequential task composition with stage-level evaluation, RescueBench enables analysis of how exploration and memory failures propagate through embodied rescue workflows. It contains five progressive difficulty levels that vary in environmental complexity, clue ambiguity, and spatial hierarchy, along with an automatic episode generation and annotation pipeline for scalable evaluation and training. We evaluate seven baselines, an oracle reference, and human players, showing that no baselines complete the full task at the greatest difficulty. Stage-level diagnosis identifies autonomous exploration as the dominant failure mode and spatial memory as a second, independent bottleneck, suggesting that these limitations are not resolved by current topological visual-language navigation or map-based methods. Code is available in https://github.com/wukui-muc/RescueBench

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI