日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2509.24917

コードから行動へ:拡散VLMポリシーの階層的学習

From Code to Action: Hierarchical Learning of Diffusion-VLM Policies

シェア:XThreadsFacebookLINEはてブBluesky

コード生成VLMと低レベル拡散ポリシーを組み合わせ、タスクをサブルーチンに分解して模倣・汎化する階層的枠組みを提案。

詳しい要約

1. どんなもの?

- ロボット操作の模倣学習のための階層フレームワーク - 高レベル: code-generating VLM がタスク記述を実行可能なサブルーチンに分解 - 低レベル: diffusion policy が対応するロボット行動を模倣 - open-source robotic APIs を実行インターフェースだけでなく構造化された監督源として利用 - サブタスク関数をモジュール的で意味のあるラベルとして扱う - メモリ機構を組み込み、code execution や object swapping などの非マルコフ的タスクに対応 - 解釈可能な policy 分解、汎化性能、高レベル計画と低レベル制御の分離評価を可能にする

2. 先行研究と比べてどこがすごい?

- flat policies と比較して汎化性能が向上 - 従来の模倣学習が抱える限られた汎化とデータ不足に対処 - 特に複雑で long-horizon なタスクにおいて - open-source robotic APIs のサブタスク関数を構造化監督として再利用する点が新しい - 高レベル計画と低レベル制御を分離して評価できる枠組みを提供 - 解釈可能な policy 分解を実現

3. 技術・手法の肝は?

- 階層構造: VLM によるタスク分解 + diffusion policy による低レベル行動生成 - VLM を訓練し、タスク記述を実行可能なサブルーチンに分解 - サブルーチンを diffusion policy で接地 - 対応するロボット行動を模倣するよう訓練 - open-source robotic APIs のサブタスク関数をモジュール的・意味的ラベルとして利用 - メモリ機構を導入し、時間をまたいでサブタスク文脈を保持 - code execution と object swapping などの非マルコフ性に対応

4. どうやって有効だと検証した?

- flat policies との比較により汎化性能の向上を確認 - 高レベル計画と低レベル制御を分離して評価 - 解釈可能な policy 分解が可能であることを示す - 具体的なタスク・データセット・評価指標は要旨からは不明

5. 議論はある?

- 非マルコフ的タスクへのメモリ機構の必要性を議論 - code execution や object swapping を例示 - open-source robotic APIs のサブタスク関数が利用可能である場合の監督源としての有効性に言及 - 限界や失敗事例、計算コスト、スケーラビリティに関する議論は要旨からは不明

6. 次に読むべき論文は?

- flat policies との比較研究 - diffusion policy に関する研究 - code-generating VLM を用いたロボット計画に関する研究 - 階層的模倣学習や long-horizon タスクへの応用研究 - 具体的な参照論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Markus Peschl, Pietro Mazzaglia, Daniel Dijkman

分類: cs.RO, cs.LG

原文アブストラクト

Imitation learning for robotic manipulation often suffers from limited generalization and data scarcity, especially in complex, long-horizon tasks. In this work, we introduce a hierarchical framework that leverages code-generating vision-language models (VLMs) in combination with low-level diffusion policies to effectively imitate and generalize robotic behavior. Our key insight is to treat open-source robotic APIs not only as execution interfaces but also as sources of structured supervision: the associated subtask functions - when exposed - can serve as modular, semantically meaningful labels. We train a VLM to decompose task descriptions into executable subroutines, which are then grounded through a diffusion policy trained to imitate the corresponding robot behavior. To handle the non-Markovian nature of both code execution and certain real-world tasks, such as object swapping, our architecture incorporates a memory mechanism that maintains subtask context across time. We find that this design enables interpretable policy decomposition, improves generalization when compared to flat policies and enables separate evaluation of high-level planning and low-level control.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI