日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2604.18933

ゲート付きメモリポリシー:文脈内記憶と適応

Gated Memory Policy: In-Context Memorization and Adaptation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作タスクの記憶要件に応じて、履歴を選択的に記憶・想起する視覚運動ポリシーを提案。メモリゲートと軽量クロスアテンションにより、非マルコフ的タスクで性能を向上させた。

詳しい要約

1. どんなもの?

ロボットマニピュレーションのvisuomotor policyであるGated Memory Policy (GMP)を提案する研究。タスクの記憶要求はMarkovianから非Markovianまで様々で、単一試行内の履歴記憶や複数試行の結果に基づくin-context adaptationを要する。観測履歴を単純に延長するとdistribution shiftと過学習で性能が大きく低下する問題に対処する。GMPは『いつ記憶を想起するか』と『何を想起するか』の両方を学習する。

2. 先行研究と比べてどこがすごい?

観測履歴を単純に延長するlong-historyベースラインと比べ、提案する非MarkovianベンチマークMemMimicで平均成功率30.1%向上。Markovianタスク(RoboMimic)でも競争力のある性能を維持。履歴延長によるdistribution shiftと過学習を緩和する点が先行研究と比べて優れる。

3. 技術・手法の肝は?

記憶を想起すべき時を学ぶlearned memory gate mechanismで、必要な時のみ履歴コンテキストを選択的に活性化し、robustnessとreactivityを改善。何を想起するかを効率的に学ぶため、軽量なcross-attention moduleで有効なlatent memory representationsを構築。さらにrobustness向上のため、historical actionsにdiffusion noiseを注入し、訓練と推論の両方でノイズや不正確な履歴への感度を低減。

4. どうやって有効だと検証した?

提案する非MarkovianベンチマークMemMimicで評価し、long-historyベースラインに対し平均成功率30.1%の改善を確認。MarkovianタスクではRoboMimicで競争力のある性能を維持することを検証。コード、データ、in-the-wild deployment instructionsはプロジェクトウェブサイトで公開。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

long-history baselines、MemMimic、RoboMimic、visuomotor policy、cross-attention、diffusion noiseに関する研究。要旨で参照/比較されている具体的な論文名は記載されていない。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yihuai Gao, Jeff Jinyun Liu, Shuang Li, Shuran Song

分類: cs.RO, cs.AI

原文アブストラクト

Robotic manipulation tasks exhibit varying memory requirements, ranging from Markovian tasks that require no memory to non-Markovian tasks that demand in-context memorization of historical information within a single trial or in-context adaptation based on the outcomes of multiple past trials. Surprisingly, simply extending observation histories of a visuomotor policy often leads to a significant performance drop due to distribution shift and overfitting. To address these issues, we propose Gated Memory Policy (GMP), a visuomotor policy that learns both when to recall memory and what to recall. To learn when to recall memory, GMP employs a learned memory gate mechanism that selectively activates history context only when necessary, improving robustness and reactivity. To learn what to recall efficiently, GMP introduces a lightweight cross-attention module that constructs effective latent memory representations. To further enhance robustness, GMP injects diffusion noise into historical actions, mitigating sensitivity to noisy or inaccurate histories during both training and inference. On our proposed non-Markovian benchmark MemMimic, GMP achieves a 30.1% average success rate improvement over long-history baselines, while maintaining competitive performance on Markovian tasks in RoboMimic. All code, data and in-the-wild deployment instructions are available on our project website https://gated-memory-policy.github.io/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI