日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ナビゲーションarXiv:2605.18729

Robo-Cortex: 二重粒度認知記憶と自律知識誘導による自己進化型具現化エージェント

Robo-Cortex: A Self-Evolving Embodied Agent via Dual-Grain Cognitive Memory and Autonomous Knowledge Induction

シェア:XThreadsFacebookLINEはてブBluesky

ロボットが過去の経験からナビゲーションのヒューリスティックを自律的に抽出し、戦略を進化させる自己進化型フレームワークを提案した。

詳しい要約

1. どんなもの?

- 実世界のembodied agent向けに、未知環境でのナビゲーションを可能にする自己進化フレームワークRobo-Cortexを提案。 - 過去の経験から一般化可能な戦略を合成できない「experiential amnesia」問題に対処。 - 継続的なreflection-adaptation loopを通じて、ナビゲーションheuristicsを自律的に誘導し、認知戦略を洗練。 - 成功パターンと失敗の落とし穴を自然言語のheuristicsに抽象化し、受動的実行から能動的戦略進化へ移行。

2. 先行研究と比べてどこがすごい?

- 従来のtrajectory-drivenやreactiveなポリシーは、過去の相互作用から一般化可能な戦略を合成できず、未知環境で苦戦。 - Robo-Cortexは自己進化により、経験を自然言語のheuristicsとして抽象化し、戦略を能動的に進化させる点が新しい。 - 実験で強いベースラインを上回り、最大+4.16% SPLの改善、未知環境へのheuristic転移で最大+15.30% SPLの向上を達成。

3. 技術・手法の肝は?

- 中核はAutonomous Knowledge Induction (AKI)機構:マルチモーダル軌跡を構造化されたNavigation Heuristic Libraryに蒸留し、知識を一般化。 - Dual-Grain Cognitive Memoryシステム:Short-term Reflective Memory (SRM)がリアルタイムの局所進捗分析、Long-term Principle Memory (LPM)が過去軌跡を再利用可能な指針と注意原則に抽象化。 - マルチモーダルImagine-then-Verifyループ:world modelが潜在的な結果をシミュレートし、VLMベースの評価器が行動計画を検証。

4. どうやって有効だと検証した?

- IGNav、AR、AEQAでの広範な評価を実施。 - Robo-Cortexはタスク成功率と探索効率の両方で強いベースラインを一貫して上回る。 - 最強の先行手法と比較して最大+4.16% SPLの改善、未知環境へのheuristic転移で最大+15.30% SPLの向上。 - 予備的な実世界ロボット実験も物理設定での有効性を支持。

5. 議論はある?

- 要旨からは、手法の限界や失敗事例、計算コスト、スケーラビリティに関する議論は明示されていない。 - 実世界実験は予備的であり、詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:IGNav、AR、AEQAのベースライン手法。 - 関連手法:trajectory-driven policies、reactive policies、world model、VLM-based evaluator。 - 同分野の定番:embodied navigation、vision-language navigation (VLN)、lifelong learning、memory-augmented navigation。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Nga Teng Chan, Yi Zhang, Yechi Liu, Renwen Cui, Fanhu Zeng, Zeyuan Ding, Xiancong Ren, Zhang Zhang, Qifeng Chen, Jian Liu, Yong Dai, Xiaozhu Ju

分類: cs.RO, cs.CV

原文アブストラクト

The ability to navigate and interact with complex environments is central to real-world embodied agents, yet navigation in unseen environments remains challenging due to "experiential amnesia," where existing trajectory-driven or reactive policies fail to synthesize generalizable strategies from past interactions. We propose Robo-Cortex, a self-evolving framework that enables robots to autonomously induce navigation heuristics and refine cognitive strategies through a continuous reflection-adaptation loop. By abstracting success patterns and failure pitfalls into natural-language heuristics, Robo-Cortex enables a transition from passive execution to active strategy evolution. Our core innovation is an Autonomous Knowledge Induction (AKI) mechanism that distills multimodal trajectories into a structured Navigation Heuristic Library for knowledge generalization. The architecture further incorporates a Dual-Grain Cognitive Memory system, comprising a Short-term Reflective Memory (SRM) for real-time local progress analysis, and a Long-term Principle Memory (LPM) that abstracts past trajectories into reusable guiding and cautionary principles. To ensure robust decision-making, we introduce a multimodal Imagine-then-Verify loop, where a world model simulates potential outcomes and a VLM-based evaluator validates action plans. Extensive evaluations on IGNav, AR, and AEQA show that Robo-Cortex consistently outperforms strong baselines in both task success and exploration efficiency, with gains of up to +4.16% SPL over the strongest prior method and up to +15.30% SPL under heuristic transfer to unseen environments. Preliminary real-world robotic experiments further support the effectiveness of Robo-Cortex in physical settings.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI