日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2607.29482

時間的ポリシー:実演学習のための履歴初期化アクション生成

Temporal Policy: History-Initialized Action Generation for Robotic Learning from Demonstration

シェア:XThreadsFacebookLINEはてブBluesky

拡散モデルやフローマッチングの代わりに、ロボットの最近の履歴から生成フローを初期化する時間的結合輸送問題としてアクション生成を定式化し、輸送コストを削減して高速な推論を実現する新しい生成フレームワークを提案した。

詳しい要約

1. どんなもの?

Temporal Policyは、ロボットのLearning from Demonstration (LfD)のための生成フレームワークであり、stochastic interpolantsに基づく。アクション生成を時間的に結合された輸送問題として定式化し、生成フローをロボットの最近の履歴で初期化することで、過去の状態と未来のアクション系列を明示的に結合する。これにより、輸送コストを削減し、直線的なベクトル場を生成する。

2. 先行研究と比べてどこがすごい?

標準的な拡散モデルやフローマッチングモデルは、情報を含まないGaussian priorからの独立した結合に依存するため、物理的なアクション空間に到達するために複雑で高コストなベクトル場を学習する必要がある。Temporal Policyは、データ依存の結合を導入することで輸送コストを削減し、推論コストを低減する。

3. 技術・手法の肝は?

手法の核心は、stochastic interpolantsを用いた生成フレームワークにおいて、生成フローをロボットの最近の履歴で初期化することである。これにより、過去の状態と未来のアクション系列を時間的に結合し、輸送問題を単純化する。結果として、輸送コストが削減され、ベクトル場が直線的になる。

4. どうやって有効だと検証した?

visuomotorシミュレーションベンチマークと、物理的なBarrett WAM 2x 7DoFテレオペレーションプラットフォームで検証した。ノイズ初期化のベースラインと比較して輸送コストを約1桁削減し、単一のNVIDIA RTX 4080上で19.1 msの推論レイテンシを達成した。さらに、成功率は最先端のベースラインと同等であることを示した。

5. 議論はある?

要旨からは、議論の詳細は不明であるが、提案手法が幾何学的・計算的効率を達成しつつ、成功率を維持することに焦点が当てられている。独立したGaussian priorの計算ボトルネックを回避することで、高周波の閉ループ制御を可能にすると述べている。

6. 次に読むべき論文は?

要旨で参照されている関連手法として、拡散モデル、フローマッチングモデル、stochastic interpolantsが挙げられる。また、Learning from Demonstrationの分野の定番として、Behavior CloningやDiffusion Policyなどが関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dylan Miller, Martin Jagersand

分類: cs.RO

原文アブストラクト

By relying on independent couplings from uninformative Gaussian priors, standard diffusion and flow matching models are forced to learn complex, high-cost vector fields to reach the physical action space. Generative models excel at capturing multimodal behaviors for robotic Learning from Demonstration (LfD), but often suffer from high inference cost. This paper introduces Temporal Policy, a generative framework based on stochastic interpolants that formulates action generation as a temporally coupled transport problem. By initializing the generative flow at the robot's recent history, we explicitly couple past states to future action sequences. This data-dependent coupling reduces transport cost and produces straight vector fields. We validate Temporal Policy across visuomotor simulation benchmarks and on a physical Barrett WAM 2x 7DoF teleoperation platform. Our approach reduces transport costs by nearly an order of magnitude compared to noise-initialized baselines, achieving a 19.1 ms inference latency on a single NVIDIA RTX 4080. Crucially, these geometric and computational efficiencies are achieved while matching the success rates of state-of-the-art baselines. This simplified transport geometry bypasses the computational bottleneck of independent Gaussian priors, helping enable high-frequency, closed-loop control. The code is publicly available at https://github.com/dmiller12/TemporalPolicy.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI