日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2609.32453

DRAM: ロボットマニピュレーション方策のためのデルタ則リカレント連想記憶

DRAM: Delta-rule Recurrent Associative Memory for Robot Manipulation Policies

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みロボット方策に後付けできる固定サイズの連想記憶モジュールDRAMを提案し、バックボーンを凍結したまま長期的な履歴依存タスクの性能を向上させた。

詳しい要約

1. どんなもの?

ロボットマニピュレーションは本質的に履歴依存だが、既存の事前学習済みポリシーは現在の観測や短い時間窓のみを条件とすることが多い。本論文は DRAM (Delta-rule Recurrent Associative Memory) を提案する。これは広範な事前学習済みロボティックポリシーに取り付け可能な plug-and-play のメモリモジュールで、アーキテクチャ変更や backbone 再学習なしに長期的記憶を与える。固定サイズの連想記憶を gated delta-rule linear attention で維持し、各フレーム内の全トークンを並列に取り込む更新を採用。アーキテクチャ非依存の readout で履歴文脈を行動予測に統合する。

2. 先行研究と比べてどこがすごい?

既存手法は backbone に多フレーム観測窓を入力し推論コストを大幅に増やすか、事前定義の意味特徴に依存しタスク汎用性を制限し backbone 再学習を要することがある。DRAM は backbone を凍結したままメモリモジュールと action expert のみをタスク特化で post-training するだけで長期的記憶を付与でき、アーキテクチャ変更や backbone 再学習が不要な点が優れる。固定サイズ記憶で短文脈ベースラインや代替のコンパクトメモリ設計より一貫して改善すると報告。

3. 技術・手法の肝は?

中核は gated delta-rule linear attention を用いた固定サイズの連想記憶。各フレーム内の全トークンを並列に取り込むよう更新を修正。アーキテクチャ非依存の readout により、異なるポリシーアーキテクチャ間で履歴文脈を行動予測に統合。backbone は凍結し、メモリモジュールと action expert のみをタスク特化で post-training する。

4. どうやって有効だと検証した?

実験により、DRAM が凍結した事前学習済みポリシーを短文脈ベースラインおよび代替のコンパクトメモリ設計に対して一貫して改善することが示された。これにより、backbone を凍結して学習される固定サイズの post-hoc メモリモジュールとしての有効性が検証された。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている具体的な研究名は明示されていない。関連手法として、gated delta-rule linear attention、delta-rule 系の連想記憶、多フレーム観測窓を用いるポリシー、事前定義の意味特徴に依存するメモリ手法が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xinyu Zhao, Yixiang Shan, Tao Yang, Runyu Lei, Yiming Zhao, Jiaxin Fan, Zongbao Feng, Peng Jia

分類: cs.RO, cs.AI

原文アブストラクト

Robotic manipulation is inherently history-dependent, yet most pretrained robotic policies condition on only the current observation or a short temporal window. Equipping such policies with long-term memory remains challenging: existing approaches either feed the backbone multi-frame observation windows, which substantially increase inference cost, or rely on pre-defined semantic features, which limit task generality and may also require the retraining of the backbone to adapt to the memory. We introduce DRAM (Delta-rule Recurrent Associative Memory), a plug-and-play memory module that can be attached to a wide range of pretrained robotic policies, endowing them with long-horizon memory without architectural modification or backbone retraining, requiring only task-specific post-training of the memory module and action expert. DRAM maintains a fixed-size associative memory using gated delta-rule linear attention, with a modified update that incorporates all tokens within each frame in parallel. An architecture-agnostic readout integrates historical context into action prediction across different policy architectures. Experiments show that DRAM consistently improves frozen pretrained policies over short-context baselines and alternative compact memory designs, validating its effectiveness as a fixed-size, post-hoc memory module trained with the backbone frozen.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI