日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

記憶・ナビゲーションarXiv:2609.32313

MemTransfer: 実世界意思決定における経験を超えた記憶のベンチマーク

MemTransfer: Benchmarking Memory Beyond Matched Experience in Embodied Decision-Making

シェア:XThreadsFacebookLINEはてブBluesky

ロボットエージェントの記憶表現6種を比較するベンチマークを提案し、条件変化に対する記憶の頑健性が一様でないことを示した。

詳しい要約

1. どんなもの?

- 本論文は MemTransfer を提案する。 - 身体性エージェントの記憶表現を評価する benchmark。 - 6つの記憶表現を比較する。 - working-memory baseline と5つの過去経験表現。 - 共有の frozen vision-language-model policy を使用。 - シミュレーション倉庫で10タスク種別、100ナビゲーションケース。 - expert demonstrations が履歴を提供。

2. 先行研究と比べてどこがすごい?

- 従来の記憶評価は matched experience に偏りがち。 - 本 benchmark は条件変化下での記憶の適用を評価。 - 開始 pose、route availability、履歴の量とタスク関連性を変化させる。 - 記憶の保持だけでなく decision time での利用を検証する点が新しい。 - 単一の frozen VLM policy 下で公平に比較。

3. 技術・手法の肝は?

- 6つの記憶表現を同一の frozen vision-language-model policy で比較。 - working-memory baseline と5つの過去経験表現。 - 3つの比較軸を設定。 - 開始 pose の変更。 - route availability の変更。 - 履歴の量とタスク関連性の変更。 - シミュレーション倉庫で100ケース、10タスク種別。 - expert demonstrations を履歴として供給。

4. どうやって有効だと検証した?

- タスクあたり1 demonstration で検証。 - Full-context と Episodic memory は元の開始 pose で 95.3% と 100.0% 成功。 - 新しいテスト開始 pose では 48-49 ポイント低下。 - Summary は2つのテスト開始間で変化が小さい。 - タスクあたり4 demonstrations で検証。 - route 遮断後、Summary は unchanged-route 成功の 39.3% を保持。 - Working memory は 44.8%、2つの trajectory memories は 56-58%。 - 新しいテスト開始 pose で関連 demonstration を1から4に増加。 - Episodic 成功は 14.3 ポイント向上。 - 他の表現は最大 1.3 ポイントのみ。 - 関連履歴の半分を他タスク経験に置換。 - 両 trajectory memories の成功が低下。

5. 議論はある?

- ある種の mismatch への robustness は別の mismatch への robustness を意味しない。 - 記憶の評価では保存情報と decision time での利用の両方を評価する必要がある。 - 記憶表現ごとに異なる条件変化への感度が示された。 - 具体的な議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法。 - Full-context memory - Episodic memory - Summary memory - Working memory - trajectory memories - 同分野の定番として vision-language-model policy を用いた embodied decision-making の研究。 - 記憶表現の benchmark 設計に関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haiming Tang, Xianjie Dai, Gujie Shao, Zuyi Guo, Jingguang Li, Kailang Ma, Yihong Tang, Heye Huang

分類: cs.RO

原文アブストラクト

Memory lets an embodied agent reuse past experience, yet retaining useful information does not ensure that the agent can apply it when conditions change. We present MemTransfer, a benchmark comparing six memory representations, a working-memory baseline and five representations of past experience, under a shared frozen vision-language-model policy. It comprises 100 navigation cases across ten task types in a simulated warehouse, with expert demonstrations supplying the history. Three comparisons vary the starting pose, route availability, and amount and task relevance of history. With one demonstration per task, Full-context and Episodic memory reach 95.3% and 100.0% success at the original demonstration start, but lose 48-49 percentage points at a new test start. Summary changes little between these two test starts, yet with four demonstrations per task it retains a smaller fraction of its unchanged-route success after blocking (39.3%) than Working memory (44.8%) or the two trajectory memories (56-58%). At the new test start, increasing from one to four relevant demonstrations raises Episodic success by 14.3 percentage points, while the other evaluated representations gain no more than 1.3 percentage points. Replacing half of the relevant histories with other-task experience lowers success for both trajectory memories. These results show that robustness to one kind of mismatch does not imply robustness to another, motivating evaluation of both stored information and its use at decision time.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI