日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2510.10181

Dejavu:身体性知能のための経験フィードバック学習

Dejavu: Towards Experience Feedback Learning for Embodied Intelligence

シェア:XThreadsFacebookLINEはてブBluesky

凍結したVLAポリシーに過去の実行記憶を検索して与える経験フィードバックネットワークを提案し、展開後も経験から学習して適応性と成功率を向上させる。

詳しい要約

1. どんなもの?

- 実世界に配備後の embodied agent が新知識を獲得しにくい問題に対し、配備後学習の一般フレームワーク Dejavu を提案 - frozen な Vision-Language-Action (VLA) policy を変更せず、retrieved execution memories で拡張 - Experience Feedback Network (EFN) が文脈的に関連する過去の action 経験を特定し、その guidance に条件付けて action 予測を行う - 配備中に EFN が新 trajectory で memory を継続拡張し、learning from experience を実現

2. 先行研究と比べてどこがすごい?

- 従来の frozen VLA policy は配備後に新知識を獲得できず性能改善が困難という制約があった - Dejavu は policy 自体を再学習せず、retrieved execution memories と EFN により配備後学習を可能にする点が異なる - 多様な embodied タスクで frozen baseline に対し adaptability、robustness、success rate の改善を報告 - 具体的な比較対象の prior 手法名は要旨からは不明

3. 技術・手法の肝は?

- frozen な Vision-Language-Action (VLA) policy を土台として保持 - Experience Feedback Network (EFN) が現在の observation に対し文脈的に関連する prior action experiences を memory から検索 - 検索された guidance に条件付けて action 予測を行う - EFN は reinforcement learning と semantic similarity rewards で訓練し、予測 action が現在 observation 下の過去 behavior と整合するよう促す - 配備時に memory を新 trajectory で継続拡張

4. どうやって有効だと検証した?

- 多様な embodied タスクで実験を実施 - frozen baseline と比較し adaptability、robustness、success rate の改善を確認 - 具体的なタスク名・データセット名・評価指標の詳細は要旨からは不明

5. 議論はある?

- 配備後に memory を拡張し続ける設計のため、memory 管理や検索品質の影響が議論対象になり得る - frozen VLA policy を前提とするため、policy 自体の更新との比較や限界は要旨からは不明 - reinforcement learning と semantic similarity rewards の設計依存性や汎化性は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として Vision-Language-Action (VLA) policy、retrieval-augmented な手法、experience replay、reinforcement learning を用いた embodied agent 研究を次に読む候補として挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shaokai Wu, Yanbiao Ji, Qiuchang Li, Zhiyi Zhang, Qichen He, Wenyuan Xie, Guodong Zhang, Bayram Bayramli, Yue Ding, Hongtao Lu

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Embodied agents face a fundamental limitation: once deployed in real-world environments, they cannot easily acquire new knowledge to improve task performance. In this paper, we propose Dejavu, a general post-deployment learning framework that augments a frozen Vision-Language-Action (VLA) policy with retrieved execution memories through an Experience Feedback Network (EFN). EFN identifies contextually relevant prior action experiences and conditions action prediction on the retrieved guidance. We train EFN with reinforcement learning and semantic similarity rewards, encouraging the predicted actions to align with past behaviors under the current observation. During deployment, EFN continually expands its memory with new trajectories, enabling the agent to exhibit ``learning from experience.'' Experiments across diverse embodied tasks show that EFN improves adaptability, robustness, and success rates over frozen baselines. Our Project Page is https://dejavu2025.github.io/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI