日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLA/記憶/ベンチマークarXiv:2606.22338

RoboMME-Interference:干渉下でのロボット記憶のベンチマーク

RoboMME-Interference: Benchmarking Robot Memory Under Interference

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの長期記憶性能を評価するため、無関係なセッションを干渉として加えたクロスセッションベンチマークを構築し、既存のVLAモデルが干渉に弱いことを示した。

詳しい要約

1. どんなもの?

- 実環境で長期運用されるロボットの記憶能力を評価する cross-session benchmark。 - RoboMME を基盤に構築し、query episode に対し関連する prior demonstration と制御された数の無関係 session を履歴として与える。 - VLA に memory として渡し accuracy を測定する。 - 公開されている memory-augmented π_{0.5} variants を未改変で評価。

2. 先行研究と比べてどこがすごい?

- 従来の robot-memory benchmark は単一 episode や短い context に基づくものが多い。 - 本 benchmark は複数 session にまたがる長い context と distractor を導入。 - 長文脈記憶と干渉への頑健性の重要性を示し、現行システムが大きく失敗することを明らかにする。

3. 技術・手法の肝は?

- RoboMME 上に cross-session benchmark を構築。 - 各 query episode に対し、関連する prior demonstration の後に制御された数の無関係 session を並べた session history を生成。 - これを VLA に memory として入力し accuracy を測定。 - 最強 variant に visual similarity で demonstration を探し、それのみを policy に渡す retrieval step を追加。

4. どうやって有効だと検証した?

- 公開された memory-augmented π_{0.5} variants を未改変で benchmark に通して評価。 - perceptual memory variants は distractor なしでは success が改善するが、無関係 session が増えるにつれ success が強く着実に減衰。 - retrieval step を追加すると、全干渉レベルで no-distractor success rate を回復。

5. 議論はある?

- 長文脈記憶と干渉への頑健性の重要性を強調。 - 現行システムはこれらの能力で largely fail することを示す。 - 具体的な限界や今後の課題の詳細は要旨からは不明。

6. 次に読むべき論文は?

- RoboMME - memory-augmented π_{0.5} variants - VLA - retrieval step を用いた visual similarity ベースの手法

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Soumil Rathi

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Robots deployed in realistic settings will accumulate experience across many sessions and tasks over their deployment. The robot's tasks may often require it to remember information from multiple sessions ago, making long-context robot memory important for real-world deployments. However, most robot-memory benchmarks today are based on single episodes or a short context. To measure how current robot memory systems perform on longer sessions with more distractions, we introduce RoboMME-Interference, a cross-session benchmark built on RoboMME. For each query episode, we construct a session history using the query's relevant prior demonstration followed by a controlled number of unrelated sessions, which we provide to the VLA as memory and measure accuracy. Running RoboMME's released memory-augmented $\pi_{0.5}$ variants unmodified through this benchmark, we find that while perceptual memory variants improve success when given the history without any distractors, they decay strongly and steadily as unrelated sessions accumulate. Adding a retrieval step to the strongest variant, which finds the demonstration by visual similarity and passes only it to the policy, restores its no-distractor success rate at every interference level. With this release, we emphasize the importance of long-context memory and robustness to interference and show that current systems largely fail on such capabilities. The project page, videos, code, and data are at https://robotmemorybench.com.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3Google DeepMind、ロボット向けAIを発表新製品・発表
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI