日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2610.05765

双線形フローポリシー:目標条件付き視覚運動模倣のための分布的外挿

Bilinear Flow Policy: Distributional Extrapolation for Goal-Conditioned Visuomotor Imitation

シェア:XThreadsFacebookLINEはてブBluesky

未見の目標に対しても多峰性を保ちながら外挿できるよう、アンカー検索と双線形条件付きフローを組み合わせた視覚運動模倣ポリシーを提案し、シミュレーションの操作タスクで分布外成功率を大幅に改善した。

詳しい要約

1. どんなもの?

- 目的: 目標条件付き模倣学習 (GCIL) において、デモンストレーションのサポート外の目標 (unseen goals) に外挿する問題 (distributional extrapolation) を解決する。 - 提案: Bilinear Flow Policy (BFP) という生成的な視覚運動ポリシー。 - 特徴: transductive retrieval と bilinear conditional flow を組み合わせ、未見の観察-目標ペアを既知のアンカー例と残差項に分解して行動予測を行う。 - 検証: シミュレーションの5つの操作タスクと実世界の2つのタスクで評価。

2. 先行研究と比べてどこがすごい?

- 従来のGCIL with flow matchingは多様な目標に適応できるが、目標がデモンストレーションのサポート外だと失敗しやすい。 - BFPは分布外目標に対して、多様性 (multimodality) を崩さずに外挿できる。 - シミュレーションで、GCILポリシーの2.63倍、外挿に特化した最強ベースラインの1.36倍の成功率を達成。 - 実世界タスクではGCILより32%改善。

3. 技術・手法の肝は?

- 未見の観察-目標ペアに対し、学習済み視覚特徴と新規の学習されたアンカー選択アルゴリズムを用いてアンカーを選ぶ。 - 未見ペアを「アンカー + 残差項」にtransductiveに再定式化。 - 残差項が現在の観察-目標ペアとアンカーの差異をコンパクトに符号化し、その差異が対応する行動分布の予測に役立つようにアンカーを選択。 - 新規のbilinear flowがアンカーと残差が共同で多様な行動分布を決定する方法をモデル化。

4. どうやって有効だと検証した?

- シミュレーションで5つの操作タスクを実施。 - 実世界で2つのタスクを実施。 - 成功率を指標に、GCILポリシーや外挿に特化したベースラインと比較。 - 理論的には、bilinear flowの下で未見目標における行動分布誤差が、問題依存の因子を除いて分布内のflow-matching誤差で抑えられることを証明。

5. 議論はある?

- 理論から、訓練されたポリシーがどの未見目標に外挿できるかを予測する実用的な事前展開診断法が得られる。 - 限界や課題については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: GCIL with flow matching, extrapolation-targeted baseline。 - 関連手法: flow matching, goal-conditioned imitation learning (GCIL), transductive retrieval, bilinear flow。 - 同分野の定番: behavior cloning, reinforcement learning。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wonsuhk Jung, Sundhar Vinodh Sangeetha, Chen Xu, Abhishek Gupta, Masha Itkina, Shreyas Kousik, Haruki Nishimura

分類: cs.RO

原文アブストラクト

Goal-conditioned imitation learning (GCIL) with flow matching is a promising framework that can represent multimodal behaviors while adapting to diverse, user-specified goals, yet often fails when goals lie outside the demonstration support. To extrapolate to such unseen goals without collapsing multimodality - a problem we call distributional extrapolation - we introduce Bilinear Flow Policy (BFP), a generative visuomotor policy that combines transductive retrieval with a bilinear conditional flow. Given an unseen observation-goal pair, BFP retrieves an "anchor" training example and transductively reformulates the unseen pair as this familiar anchor plus a residual term. For this decomposition to guide action prediction, the residual must compactly encode how the current observation-goal pair differs from the anchor, and the anchor must be chosen so that this difference is predictive of the corresponding action distribution. BFP achieves this with pretrained visual features and a novel learned anchor-selection algorithm. The novel bilinear flow then models how the anchor and the residual jointly determine the multimodal action distribution. We prove that, for bilinear flow under suitable assumptions, action distribution error at unseen goals is bounded by the in-distribution flow-matching error up to problem-dependent factors. Across five manipulation tasks in simulation, BFP achieves 2.63x the out-of distribution success rate of a GCIL policy and 1.36x that of the strongest extrapolation-targeted baseline. On two real-world tasks, BFP improves over GCIL by 32%. Finally, our theory yields practical, pre deployment diagnostics for predicting which trained policies will extrapolate well and to which unseen goal.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI