日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

軌道生成/強化学習arXiv:2603.14056

キー付きドリフト場による軌道拡散の償却

Amortizing Trajectory Diffusion with Keyed Drift Fields

シェア:XThreadsFacebookLINEはてブBluesky

拡散ベースの軌道プランナーをワンステップ推論で実現する手法を提案。条件付き生成における分布マッチングの失敗を分析し、条件を反映したキー空間での距離に基づくドリフト場を導入して、多様な軌道生成を可能にした。

詳しい要約

1. どんなもの?

本論文は、offline reinforcement learning における trajectory planning を対象に、diffusion ベースの planner が持つ反復 denoising の推論コストを削減する手法 Keyed Drifting Policies (KDP) を提案する。 - 目的 - diffusion のような多様な trajectory 生成を one-step 推論で実現する。 - receding-horizon control loop で現在状態に条件付けし、複数候補 plan をサンプリング可能にする。 - 提案 - drift-field objective で訓練される one-step trajectory generator。 - 推論時は単一 forward pass で trajectory window 全体を生成する。 - 検証 - 標準 RL benchmarks と real-time hardware deployments で評価。

2. 先行研究と比べてどこがすごい?

diffusion-based trajectory planners は多様な multimodal action sequences を生成できるが、iterative denoising により推論時コストが大きく、closed-loop planning が遅くなる。 - 提案の優位 - one-step inference で diffusion 的 planning 挙動を目指す。 - 多様な候補 plan のサンプリングと現在状態への条件付けを維持。 - 標準 RL benchmarks と real-time hardware deployments で、one-step inference ながら強い性能と diffusion sampling より大幅に低い planning latency を達成。 - 課題の指摘 - 条件付き trajectory 生成では、naïve な distribution-matching objective が unconstrained future dimensions に支配され、平均的 trajectory…

3. 技術・手法の肝は?

技術の肝は、条件付き生成 planning に conditioning-aware な neighborhood 概念を導入すること。 - 鍵となる考え - trajectory 更新は、condition を反映する compact key space での距離を用いて計算する。 - 一方で更新自体は full trajectory space で適用する。 - 提案手法 - Keyed Drifting Policies (KDP): one-step trajectory generator。 - drift-field objective で訓練。 - 生成 trajectory を condition-matched dataset windows へ attraction。 - 近傍の生成サンプルから repulsion。 - stop-gradient drifted target を用いて iterative refinement を訓練に amortize する。 - 推論 - 単一 forward pass で full t…

4. どうやって有効だと検証した?

有効性の検証は、標準 RL benchmarks と real-time hardware deployments で実施。 - 評価結果 - KDP は one-step inference で強い性能を達成。 - diffusion sampling と比較して planning latency を大幅に低減。 - 詳細 - 具体的な benchmark 名、hardware 構成、指標、比較手法の詳細は要旨からは不明。 - project website, code, videos が公開されている: https://keyed-drifting.github.io/

5. 議論はある?

要旨で議論されている主な点は、conditional trajectory generation における naïve な distribution-matching objective の問題。 - 問題 - similarity measure が unconstrained future dimensions に支配される。 - その結果、平均的 trajectory への attraction、action diversity の collapse、near-static behavior が生じる。 - 解決の方向 - condition を反映する compact key space での距離計算と、full trajectory space での更新を分離する。 - 限界や未解決点 - 具体的な失敗事例、計算コスト、ハイパーパラメータ感度、他手法との詳細比較は要旨からは不明。

6. 次に読むべき論文は?

要旨で参照・比較されている研究や関連手法として、以下が挙げられる。 - diffusion-based trajectory planners - offline reinforcement learning - distribution-matching objectives - drift-field objective - stop-gradient drifted target - receding-horizon control loop - 同分野の定番として、offline RL の trajectory planning 手法や diffusion policy 関連の研究。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Gokul Puthumanaillam, Melkior Ornik

分類: cs.RO, cs.SY, eess.SY

原文アブストラクト

Diffusion-based trajectory planners can synthesize rich, multimodal action sequences for offline reinforcement learning, but their iterative denoising incurs substantial inference-time cost, making closed-loop planning slow under tight compute budgets. We study the problem of achieving diffusion-like trajectory planning behavior with one-step inference, while retaining the ability to sample diverse candidate plans and condition on the current state in a receding-horizon control loop. Our key observation is that conditional trajectory generation fails under na\"ive distribution-matching objectives when the similarity measure used to align generated trajectories with the dataset is dominated by unconstrained future dimensions. In practice, this causes attraction toward average trajectories, collapses action diversity, and yields near-static behavior. Our key insight is that conditional generative planning requires a conditioning-aware notion of neighborhood: trajectory updates should be computed using distances in a compact key space that reflects the condition, while still applying updates in the full trajectory space. Building on this, we introduce Keyed Drifting Policies (KDP), a one-step trajectory generator trained with a drift-field objective that attracts generated trajectories toward condition-matched dataset windows and repels them from nearby generated samples, using a stop-gradient drifted target to amortize iterative refinement into training. At inference, the resulting policy produces a full trajectory window in a single forward pass. Across standard RL benchmarks and real-time hardware deployments, KDP achieves strong performance with one-step inference and substantially lower planning latency than diffusion sampling. Project website, code and videos: https://keyed-drifting.github.io/

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  4. 4GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI