日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

群制御arXiv:2603.08111

DeReCo: 物体適応型分散マルチロボット協調搬送のための表現学習と協調学習の分離

DeReCo: Decoupling Representation and Coordination Learning for Object-Adaptive Decentralized Multi-Robot Cooperative Transport

シェア:XThreadsFacebookLINEはてブBluesky

分散マルチロボット協調搬送において、物体依存の表現学習と協調学習を3段階の訓練戦略で分離し、サンプル効率と汎化性能を向上させるMARLフレームワークを提案。

詳しい要約

1. どんなもの?

- 分散型マルチロボット協調搬送のためのMARLフレームワークDeReCoを提案。 - 多様な形状・物理特性の物体に適応する汎化を目指す。 - 表現学習と協調学習を分離する3段階訓練を採用。 - 部分観測下での物体依存表現と非定常性下の協調学習の干渉を緩和。 - サンプル効率と汎化性能の向上を狙う。

2. 先行研究と比べてどこがすごい?

- 従来は表現と協調方策をend-to-endで同時最適化し、物体形状・物理特性をランダム化。 - この結合最適化は表現と協調の双方向干渉を生み、部分観測下の不正確な表現が協調学習を不安定化。 - MARLの非定常性が表現学習をさらに劣化させ、サンプル効率が低い。 - DeReCoは分離により干渉を緩和し、安定かつサンプル効率の高い訓練を実現。 - 3訓練物体でベースラインを上回り、6未見物体に汎化。

3. 技術・手法の肝は?

- 3段階訓練戦略を採用。 - 第1段階: 特権的な物体情報を用いた集中型協調学習。 - 第2段階: 局所観測から物体依存表現を再構成。 - 第3段階: 特権情報を漸進的に除去し分散実行へ移行。 - この分離により表現と協調の干渉を軽減し、安定でサンプル効率の高い訓練を可能にする。

4. どうやって有効だと検証した?

- シミュレーションで3つの訓練物体においてベースラインを上回る性能。 - 質量と摩擦係数が異なる6つの未見物体に汎化。 - 実ロボット実験で2つの未見物体において優れた性能を達成。 - これらにより有効性を検証。

5. 議論はある?

- 表現と協調の結合最適化が双方向干渉を引き起こす構造的結合を指摘。 - 分離により干渉を緩和し、サンプル効率と汎化を改善。 - 具体的な限界や失敗事例、計算コスト、実機での詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法としてMARL、end-to-end最適化、特権情報を用いた集中型訓練と分散実行(CTDE)が挙げられる。 - 同分野の定番としてMADDPG、QMIX、MAPPOなどが考えられるが、要旨に記載はない。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kazuki Shibata, Ryosuke Sota, Shandil Dhiresh Bosch, Yuki Kadokawa, Yoshihisa Tsurumine, Takamitsu Matsubara

分類: cs.RO

原文アブストラクト

Generalizing decentralized multi-robot cooperative transport across objects with diverse shapes and physical properties remains a fundamental challenge. Under decentralized execution, two key challenges arise: object-dependent representation learning under partial observability and coordination learning in multi-agent reinforcement learning (MARL) under non-stationarity. A typical approach jointly optimizes object-dependent representations and coordinated policies in an end-to-end manner while randomizing object shapes and physical properties during training. However, this joint optimization tightly couples representation and coordination learning, introducing bidirectional interference: inaccurate representations under partial observability destabilize coordination learning, while non-stationarity in MARL further degrades representation learning, resulting in sample-inefficient training. To address this structural coupling, we propose DeReCo, a novel MARL framework that decouples representation and coordination learning for object-adaptive multi-robot cooperative transport, improving sample efficiency and generalization across objects and transport scenarios. DeReCo adopts a three-stage training strategy: (1) centralized coordination learning with privileged object information, (2) reconstruction of object-dependent representations from local observations, and (3) progressive removal of privileged information for decentralized execution. This decoupling mitigates interference between representation and coordination learning and enables stable and sample-efficient training. Experimental results show that DeReCo outperforms baselines in simulation on three training objects, generalizes to six unseen objects with varying masses and friction coefficients, and achieves superior performance on two unseen objects in real-robot experiments.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI