日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

移動操作arXiv:2604.13633

ESCAPE: 長期的移動操作のためのエピソード空間記憶と適応実行ポリシー

ESCAPE: Episodic Spatial Memory and Adaptive Execution Policy for Long-Horizon Mobile Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

長期的な移動操作タスクにおける破滅的忘却、空間的不整合、硬直的な実行の問題を解決するため、エピソード空間記憶と適応実行ポリシーを備えたESCAPEを提案し、ALFREDベンチマークで最先端の性能を達成した。

詳しい要約

1. どんなもの?

- 長期的なMobile Manipulationを対象としたEmbodied AI手法「ESCAPE」の提案。 - 知覚・Grounding・実行を密結合したワークフローで構成。 - エピソード空間記憶と適応実行ポリシーを組み合わせる。 - ALFREDベンチマークで評価。

2. 先行研究と比べてどこがすごい?

- 長期タスクでのcatastrophic forgetting、空間的不整合、硬直的な実行を課題として指摘。 - 既存手法と比べ、depth-freeで永続的な3D空間記憶を自己回帰的に構築。 - 冗長な探索を削減し、path-length-weighted指標を大幅改善。 - 詳細な指示なしでも堅牢な性能を維持。

3. 技術・手法の肝は?

- Spatio-Temporal Fusion Mappingモジュールでdepth-freeの永続的3D空間記憶を自己回帰的に構築。 - Memory-Driven Target Groundingモジュールで精密なinteraction maskを生成。 - Adaptive Execution Policyが能動的global navigationと反応的local manipulationを動的に統合。 - opportunistic targetsを捉えるため、知覚・Grounding・実行を密結合。

4. どうやって有効だと検証した?

- ALFREDベンチマークで評価。 - test seenで65.09%、test unseenで60.79%の成功率(step-by-step instructions使用時)。 - 詳細なガイダンスなしの長期タスクでも61.24% / 56.04%を維持。 - path-length-weighted指標で大幅改善を確認。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、計算コスト、一般化可能性についての議論は記載なし。

6. 次に読むべき論文は?

- ALFREDベンチマークに関連する研究。 - 同分野の定番としてEmbodied AI、Mobile Manipulation、Vision-and-Language Navigation、Long-Horizon Task Planningの関連論文。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jingjing Qian, Zeyuan He, Chen Shi, Lei Xiao, Li Jiang

分類: cs.CV, cs.RO

原文アブストラクト

Coordinating navigation and manipulation with robust performance is essential for embodied AI in complex indoor environments. However, as tasks extend over long horizons, existing methods often struggle due to catastrophic forgetting, spatial inconsistency, and rigid execution. To address these issues, we propose ESCAPE (Episodic Spatial Memory Coupled with an Adaptive Policy for Execution), operating through a tightly coupled perception-grounding-execution workflow. For robust perception, ESCAPE features a Spatio-Temporal Fusion Mapping module to autoregressively construct a depth-free, persistent 3D spatial memory, alongside a Memory-Driven Target Grounding module for precise interaction mask generation. To achieve flexible action, our Adaptive Execution Policy dynamically orchestrates proactive global navigation and reactive local manipulation to seize opportunistic targets. ESCAPE achieves state-of-the-art performance on the ALFRED benchmark, reaching 65.09% and 60.79% success rates in test seen and unseen environments with step-by-step instructions. By reducing redundant exploration, our ESCAPE attains substantial improvements in path-length-weighted metrics and maintains robust performance (61.24% / 56.04%) even without detailed guidance for long-horizon tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI