日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ロボット学習arXiv:2606.02027

ロボット学習のための世界とタスクの因子分解

World-Task Factorization for Robot Learning

シェア:XThreadsFacebookLINEはてブBluesky

ロボット学習の汎化を改善するため、ポリシーを世界因子とタスク因子に構造的に分解する方法を提案し、その原理的条件を理論的に分析した。

詳しい要約

1. どんなもの?

本論文は、ロボット学習におけるポリシーの構造的分解、特に「世界(World)」と「タスク(Task)」の分離に焦点を当てる。World要因は身体・環境の性質で意図に依存せず、Task要因は世界が許容する範囲でのタスク論理で定義される。この非対称性をBayesian model evidenceで定式化し、AICON(微分可能な再帰的推定器と相互接続のグラフ)とコンパクトな学習ポリシーを組み合わせて実現する。勾配を両要因のインターフェースとし、低次元学習と構造的一般化を両立させる。異種ロボット、環境、タスク論理、感覚運動モダリティにわたる3問題で検証し、end-to-endベースラインや分析的ヒューリスティクスを上回り、zero-shotで分布外構成に一般化し、再学習なしで実機に転移する。

2. 先行研究と比べてどこがすごい?

既存手法はデータスケーリングで構造を創発させるものから、階層、スキルライブラリ、学習された特殊化で手設計するものまで幅広い。本論文は、ロボティクスで最も基本的と主張するWorld/Task分離を研究し、その分離が原理的となる条件を調査する。Bayesian model evidenceを通じて非対称性を形式化し、データ生成過程と整合し、解析的Worldモデルで高い尤度を維持し、TaskパラメータへのOccam razorのペナルティを減らす。AICONはタスク固有データなしで動作し、構成可能で、コスト勾配をアクチュエータに伝播する。勾配がWorld構造をグラフ経由で、Task構造をコスト経由で運び、低次元学習を可能にしつつ構造的一般化を保つ点が先行研究と異なる。

3. 技術・手法の肝は?

World/Task分離をBayesian model evidenceで形式化し、非対称性を導く。World要因は身体・環境の性質で意図に依存せず、Task要因は世界が許容する範囲でのタスク論理で定義される。実装ではAICON(微分可能な再帰的推定器と相互接続のグラフ)とコンパクトな学習ポリシーを組み合わせる。AICONは構成可能で、タスク固有データなしで動作し、コスト勾配をアクチュエータに伝播する。学習ポリシーは勾配経路を調節する。勾配が両要因のインターフェースとなり、World構造をグラフ経由で、Task構造をコスト経由で運ぶ。これにより低次元学習と構造的一般化を両立する。

4. どうやって有効だと検証した?

異種ロボット、環境、タスク論理、感覚運動モダリティにわたる3つの問題でWorld/Task分離をテスト。フレームワークは全設定でend-to-endベースラインと分析的ヒューリスティクスを上回り、zero-shotで分布外構成に一般化し、再学習なしで実機ハードウェアに転移する。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。関連手法として、階層、スキルライブラリ、学習された特殊化、end-to-endベースライン、分析的ヒューリスティクスが挙げられる。同分野の定番として、強化学習、模倣学習、階層的強化学習、スキルライブラリ、モデルベース強化学習などが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Eduardo Sebastián, Adrian Pfisterer, Vito Mengers, Oliver Brock, Amanda Prorok

分類: cs.RO, cs.LG, cs.MA

原文アブストラクト

Robot learning must produce policies that generalize to new combinations of constraints, teammates, and environments. To achieve this, we must structurally factor the policy, which is a choice that dictates what generalizes, what requires retraining, and what remains entangled. Existing methods span a wide spectrum, from expecting structure to emerge from data scaling, to hand-designing it via hierarchies, skill libraries or learned specializations. In this paper, we study what we argue is the most fundamental factorization in robotics: separating the world from the task. We investigate the conditions under which this factorization is principled. World factors are properties of the embodied system and the environment; they exist independently of intent. Task factors are defined by the task's logic over what the world admits. We formalize this asymmetry through Bayesian model evidence: it aligns with the data-generating process, maintains high likelihood through an analytical world model, and reduces the Occam razor's penalty on task parameters. We instantiate this factorization by pairing AICON, a differentiable graph of recursive estimators and interconnections that is compositional, operates without task-specific data, and propagates cost gradients to actuators, with a compact, learned policy that modulates gradient paths. Gradients serve as the interface between the two factors: they carry world structure through the graph and task structure through costs, enabling low-dimensional learning while preserving structural generalization. We test the world/task factorization across three problems that encompass heterogeneous robots, environments, task logic and sensorimotor modalities. Our framework outperforms end-to-end baselines and analytical heuristics in all settings, generalizes zero-shot to out-of-distribution configurations, and transfers to real hardware without retraining.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI