日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

拡散ポリシーarXiv:2507.21452

追加学習なしで拡散ポリシーを高速化する検索拡張生成

Retrieve-Augmented Generation for Speeding up Diffusion Policy without Additional Training

シェア:XThreadsFacebookLINEはてブBluesky

専門家の観測-行動ペアをベクトルDBに保存し、推論時に類似行動を検索して拡散ポリシーのノイズ除去ステップを短縮する手法を提案。追加学習なしで精度と速度のトレードオフを改善。

詳しい要約

1. どんなもの?

- Diffusion Policy (DP) の推論を追加学習なしで高速化するフレームワーク RAGDP (Retrieve-Augmented Generation for Diffusion Policies) の提案。 - 専門家デモの observation-action ペアを DP encoder でベクトル化し vector database を構築。 - 推論時に現在の observation を埋め込み、類似する専門家 action を検索して拡散ステップを短縮する。

2. 先行研究と比べてどこがすごい?

- 従来の高速化は Consistency Policy (CP) などの knowledge distillation ベースで、特に難しいタスクでは大量の学習時間を要した。 - RAGDP は追加学習を一切必要とせず、学習済み DP をそのまま活用できる点が新しい。 - 既存の加速手法と組み合わせ可能で、20倍加速時でも CP などの distillation モデルより精度が約7%高いと報告。

3. 技術・手法の肝は?

- DP encoder を用いて observation-action ペアをエンコードし、専門家デモの vector database を構築。 - 推論時に現在の observation を埋め込み、最も類似した専門家 action を検索・抽出。 - 抽出した action を中間の noise removal step と組み合わせ、元の diffusion step より少ないステップ数で生成する。

4. どうやって有効だと検証した?

- 提案手法を base model および既存の加速手法と組み合わせ、精度と速度のトレードオフを評価。 - 20倍加速時でも CP などの distillation モデルに対して精度で約7%の優位を維持することを示した。 - 具体的なタスク・データセット名は要旨からは不明。

5. 議論はある?

- 追加学習不要で既存加速手法と併用可能という利点が示唆される。 - 一方、vector database 構築や検索のコスト、専門家デモへの依存度、類似検索の失敗時の挙動については要旨からは不明。 - 詳細な限界や議論は要旨からは不明。

6. 次に読むべき論文は?

- Consistency Policy (CP) など knowledge distillation ベースの diffusion policy 高速化手法。 - 元となる Diffusion Policy (DP)。 - Retrieval-Augmented Generation (RAG) の一般的な枠組みに関する文献。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sodtavilan Odonchimed, Tatsuya Matsushima, Simon Holk, Yusuke Iwasawa, Yutaka Matsuo

分類: cs.LG, cs.RO

原文アブストラクト

Diffusion Policies (DPs) have attracted attention for their ability to achieve significant accuracy improvements in various imitation learning tasks. However, DPs depend on Diffusion Models, which require multiple noise removal steps to generate a single action, resulting in long generation times. To solve this problem, knowledge distillation-based methods such as Consistency Policy (CP) have been proposed. However, these methods require a significant amount of training time, especially for difficult tasks. In this study, we propose RAGDP (Retrieve-Augmented Generation for Diffusion Policies) as a novel framework that eliminates the need for additional training using a knowledge base to expedite the inference of pre-trained DPs. In concrete, RAGDP encodes observation-action pairs through the DP encoder to construct a vector database of expert demonstrations. During inference, the current observation is embedded, and the most similar expert action is extracted. This extracted action is combined with an intermediate noise removal step to reduce the number of steps required compared to the original diffusion step. We show that by using RAGDP with the base model and existing acceleration methods, we improve the accuracy and speed trade-off with no additional training. Even when accelerating the models 20 times, RAGDP maintains an advantage in accuracy, with a 7% increase over distillation models such as CP.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI