日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

計画/模倣学習arXiv:2605.15975

シンボリック世界モデル上の二段階ポリシー学習による長期的計画

Learning Bilevel Policies over Symbolic World Models for Long-Horizon Planning

シェア:XThreadsFacebookLINEはてブBluesky

低レベルの模倣学習と高レベルのシンボリック抽象化を組み合わせた二段階ポリシーを提案し、長期的な計画問題を効率的に解決するシステムBISONを実装した。

詳しい要約

1. どんなもの?

- 長期的な計画問題を解く embodied AI agent の構築を目指す研究。 - 低レベル (LL) の模倣学習と高レベル (HL) の記号的抽象化を組み合わせた bilevel policy (π^hl, π^ll) を提案。 - BISON システムとして実装し、MetaWorld ベンチマークで評価。

2. 先行研究と比べてどこがすごい?

- VLA や end-to-end 手法と比較して、より長い horizon と多くのオブジェクト数を持つ問題に汎化。 - 訓練と推論において時間とメモリの効率が向上。 - HL ポリシーは LL 実行を無視すれば 10,000 個の関連オブジェクトを含む HL 問題を 1 分以内に解ける。

3. 技術・手法の肝は?

- LL の neural policy π^ll を LL デモンストレーションから学習。 - HL の symbolic policy π^hl を LL デモンストレーションの記号的抽象化と帰納的一般化から構築。 - これらを組み合わせた bilevel policy (π^hl, π^ll) を採用。

4. どうやって有効だと検証した?

- 拡張された MetaWorld ベンチマークで実験。 - VLA や end-to-end 手法と比較し、長い horizon と多数オブジェクト問題への汎化を確認。 - 訓練・推論の時間とメモリ効率を評価。 - HL ポリシーが 10,000 オブジェクトの HL 問題を 1 分以内に解くことを示した。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- VLA (Vision-Language-Action) モデル - end-to-end 手法 - MetaWorld ベンチマーク - 模倣学習 (imitation learning) - 記号的抽象化 (symbolic abstraction)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dillon Z. Chen, Till Hofmann, Toryn Q. Klassen, Sheila A. McIlraith

分類: cs.AI, cs.RO

原文アブストラクト

We tackle the challenge of building embodied AI agents that can reliably solve long-horizon planning problems. Imitation learning from demonstrations has shown itself to be effective in training robots to solve a diversity of complex tasks requiring fine motor control and manipulation over low-level (LL), continuous environments. Yet, it remains a difficult endeavour to generate long-horizon plans from imitation learning alone. In contrast, high-level (HL), symbolic abstractions facilitate efficient and interpretable long-horizon planning. We propose to combine the strengths of LL imitation learning for manipulation and control, and HL symbolic abstractions for long-horizon planning. We realise this idea via \emph{bilevel policies} of the form $(\pi^{\mathrm{hl}}, \pi^{\mathrm{ll}})$, consisting of a neural policy $\pi^{\mathrm{ll}}$ learned from LL demonstrations, and an HL symbolic policy $\pi^{\mathrm{hl}}$ that is constructed from symbolic abstractions of the LL demonstrations combined with inductive generalisation. We implement these ideas in the BISON system. Experiments on extended MetaWorld benchmarks demonstrate that BISON generalises to long horizons and problems with greater numbers of objects than those solved by VLA and end-to-end methods, and is more time and memory efficient in training and inference. Notably, when ignoring LL execution, BISON's HL policies can solve HL problems with 10,000 relevant objects in under a minute. Project page: https://dillonzchen.github.io/bison

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI