日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2602.20057

AdaWorldPolicy: 世界モデル駆動型拡散ポリシーとオンライン適応学習によるロボットマニピュレーション

AdaWorldPolicy: World-Model-Driven Diffusion Policy with Online Adaptive Learning for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

世界モデル・行動エキスパート・力予測器をFlow Matching Diffusion Transformerで統合し、オンライン適応学習で動的環境に適応するロボットマニピュレーション手法を提案。

詳しい要約

1. どんなもの?

- ロボットマニピュレーションのための統合フレームワーク - World-Model-Driven Diffusion Policy with Online Adaptive Learning (AdaWorldPolicy) - 動的な環境下で最小限の人間関与で適応 - 世界モデル、行動エキスパート、力予測器をFlow Matching Diffusion Transformers (DiT)で実装 - マルチモーダル自己注意層で相互接続し、特徴交換とモジュール性を両立 - オンライン適応学習 (AdaOL) 戦略で行動生成モードと未来想像モードを動的切替 - 視覚と物理のドメインシフトに適応する閉ループ機構

2. 先行研究と比べてどこがすごい?

- 従来のロボットマニピュレーション政策と比較して、世界モデルによる強力な監督信号を活用 - 動的環境でのオンライン適応学習を可能にし、力-トルクフィードバックで動的な力の変化を緩和 - 既存手法と比べて、最小限の人間関与で動的条件に対応 - シミュレーションと実機ベンチマークで最先端性能を達成 - 分布外シナリオへの動的適応能力を有する

3. 技術・手法の肝は?

- 世界モデル、行動エキスパート、力予測器をFlow Matching Diffusion Transformers (DiT)で実装 - マルチモーダル自己注意層で相互接続し、深い特徴交換を実現 - オンライン適応学習 (AdaOL) 戦略:行動生成モードと未来想像モードを動的に切替 - 3モジュール全体で反応的な更新を駆動する閉ループ機構 - 視覚と物理のドメインシフトに低オーバーヘッドで適応

4. どうやって有効だと検証した?

- シミュレーションと実ロボットのベンチマークで評価 - 最先端性能を達成 - 分布外シナリオへの動的適応能力を確認 - 具体的な評価指標や実験設定は要旨からは不明

5. 議論はある?

- 動的環境下での適応能力と最小限の人間関与が特徴 - 力-トルクフィードバックによる動的な力の変化の緩和 - 視覚と物理のドメインシフトへの対応 - 限界や課題については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない - 関連手法として、Diffusion Policy、World Models、Flow Matching、Online Adaptive Learning、Force-Torque Feedback が挙げられる - 同分野の定番として、Robotic Manipulation with Diffusion Policies、Model-Based Reinforcement Learning などが考えられる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ge Yuan, Qiyuan Qiao, Jing Zhang, Dong Xu

分類: cs.RO, cs.AI

原文アブストラクト

Effective robotic manipulation requires policies that can anticipate physical outcomes and adapt to real-world environments. Effective robotic manipulation requires policies that can anticipate physical outcomes and adapt to real-world environments. In this work, we introduce a unified framework, World-Model-Driven Diffusion Policy with Online Adaptive Learning (AdaWorldPolicy) to enhance robotic manipulation under dynamic conditions with minimal human involvement. Our core insight is that world models provide strong supervision signals, enabling online adaptive learning in dynamic environments, which can be complemented by force-torque feedback to mitigate dynamic force shifts. Our AdaWorldPolicy integrates a world model, an action expert, and a force predictor-all implemented as interconnected Flow Matching Diffusion Transformers (DiT). They are interconnected via the multi-modal self-attention layers, enabling deep feature exchange for joint learning while preserving their distinct modularity characteristics. We further propose a novel Online Adaptive Learning (AdaOL) strategy that dynamically switches between an Action Generation mode and a Future Imagination mode to drive reactive updates across all three modules. This creates a powerful closed-loop mechanism that adapts to both visual and physical domain shifts with minimal overhead. Across a suite of simulated and real-robot benchmarks, our AdaWorldPolicy achieves state-of-the-art performance, with dynamical adaptive capacity to out-of-distribution scenarios.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI