日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

拡散ポリシー/行動生成arXiv:2606.08743

拡散ポリシーを用いた新行動の誘導的発見

Guided Discovery of New Behaviors using Diffusion Policies

シェア:XThreadsFacebookLINEはてブBluesky

拡散ポリシーのサンプリングを誘導し、多様で実行可能な新しい行動を系統的に発見・学習するフレームワークを提案した。

詳しい要約

1. どんなもの?

- 拡散モデルをロボティクスに応用したDiffusion Policyの課題に対処する研究。 - デモンストレーションが限られる場合、標準的なサンプリングでは支配的な行動が再現され、有効だが稀なモードが見落とされる問題を解決。 - Feynman-Kac correctorsと新しいguiding potentialを組み合わせ、未代表的なサンプルを系統的に発見するフレームワークを提案。 - 発見された軌道をサンプリングベースの軌道最適化で洗練し、訓練セットに再統合してDiffusion Policyを再訓練。 - 多様で実行可能な新しい行動を系統的に発見することを目指す。

2. 先行研究と比べてどこがすごい?

- 既存のguidance methodsや強化学習と拡散モデルの組み合わせは、サンプルを実行不可能な領域に押しやったり、局所解から脱出できず、多様な行動を系統的に発見できなかった。 - 提案手法はFeynman-Kac correctorsと新しいguiding potentialにより、有望だが未代表的なサンプルへと系統的に誘導する点が優れている。 - 発見した軌道を修復し再訓練に組み込むことで、多様で実行可能な行動の発見を可能にする。

3. 技術・手法の肝は?

- Feynman-Kac correctorsと新しいguiding potentialを組み合わせ、Diffusion Policyのサンプルを有望かつ未代表的な領域へ誘導。 - 誘導された軌道をサンプリングベースの軌道最適化で洗練。 - 洗練された軌道を訓練セットに再統合し、Diffusion Policyを再訓練。 - これにより新規軌道のマイニングと修復を効果的に行い、多様で実行可能な行動を系統的に発見。

4. どうやって有効だと検証した?

- 複数のmanipulation環境でフレームワークの有効性を実証。 - 一貫して新しい行動を発見できることを示した。 - 具体的な評価指標やベースラインとの比較詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:guidance methods、強化学習と拡散モデルの組み合わせ。 - 関連手法:Diffusion Policy、Feynman-Kac correctors、サンプリングベースの軌道最適化。 - 同分野の定番:Diffusion Models for Robotics、Reinforcement Learning with Diffusion Models。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dian Yu, Sebastian Sanokowski, Majid Khadiv

分類: cs.RO

原文アブストラクト

Diffusion models have become a powerful tool for generative modeling in robotics, with diffusion policies excelling at modeling multimodal action-trajectory distributions. However, when demonstrations are limited, standard sampling often reproduces dominant behaviors while neglecting valid but rare modes, limiting the discovery of novel solutions. Existing approaches, such as guidance methods or combining reinforcement learning with diffusion, either push samples into infeasible regions or struggle to escape local minima, failing to systematically uncover diverse behaviors. To address these challenges, we propose a framework that combines Feynman-Kac correctors with a novel guiding potential that systematically guides diffusion policy samples towards promising yet underrepresented samples. These trajectories are refined using sampling-based trajectory optimization and reincorporated into the training set to retrain the diffusion policy. Our method effectively mines and repairs novel trajectories, enabling the systematic discovery of diverse and executable behaviors. We demonstrate the effectiveness of our framework across a range of manipulation environments, consistently discovering new behaviors.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI