日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マルチエージェント強化学習arXiv:2606.08064

マルチエージェント強化学習による協調的な長縄跳び

Cooperative Long Rope Skipping via Multi-Agent Reinforcement Learning

シェア:XThreadsFacebookLINEはてブBluesky

複数の人型ロボットが協力して長縄跳びを行うためのマルチエージェント強化学習フレームワークを提案し、シミュレーションと実機でその有効性を実証した。

詳しい要約

1. どんなもの?

複数の humanoid robot が協調して long rope skipping を行うための multi-agent reinforcement learning (MARL) フレームワーク Marope を提案。2 人の rope turner が rope を回し、player の異なる jumping rhythm に適応する協調タスクを対象とする。Unitree G1 を用いて simulation と real-world で評価。

2. 先行研究と比べてどこがすごい?

既存の humanoid sports 研究は running, dancing, parkour など single-agent かつ interaction-free な設定で成功しているが、複数参加者の精密な coordination を要するタスクは未開拓。Marope はそのような協調タスクに取り組み、baselines より効率的・安定な rope manipulation と、多様な player への頑健で適応的な協調を実現。

3. 技術・手法の肝は?

階層的 reinforcement learning を採用。下位レベルでは MARL により decentralized な rope manipulation policies を学習。上位レベルでは centralized scheduling policy を訓練し、下位 policies の実行を調整。さらに多様な jumping policies を cooperative game training に組み込み、player の行動スタイルへの generalization を向上。

4. どうやって有効だと検証した?

Unitree G1 humanoid robots を用い、simulation と real-world の両設定で評価。Marope が各種 baselines を上回り、より効率的で安定した rope manipulation と、多様な player とのより頑健で適応的な cooperation を達成することを実験結果で示した。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている既存の humanoid sports 研究(running, dancing, parkour など single-agent かつ interaction-free な手法)や、MARL および hierarchical reinforcement learning の関連研究。具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zihao Wang, Shijie Peng, Kerui Wu, Yu Huang, Ruiqi Xue, Dong Liu, Tian Xu, Lei Yuan, Yang Yu

分類: cs.RO

原文アブストラクト

Humans exhibit remarkable motor agility, enabling a wide range of dynamic skills such as running and jumping, which highlights the great potential of humanoid robots for athletic locomotion. Among athletic sports, long rope skipping requires two rope turners to cooperatively swing the rope while adapting to a player under different jumping rhythms, making it a meaningful yet challenging task for humanoid robots. Although existing methods for humanoid sports have achieved success in single-agent and interaction-free settings, such as running, dancing, and parkour, task scenarios that require precise coordination among multiple participants remain largely unexplored. To this end, we propose Marope, a multi-agent reinforcement learning (MARL) framework for cooperative long rope skipping with multiple humanoid robots. Specifically, Marope adopts a hierarchical reinforcement learning framework for policy training. At the lower level, it learns decentralized rope manipulation policies through MARL, while at the upper level, a centralized scheduling policy is trained to coordinate the execution of the lower-level policies. To improve generalization across different player behavioral styles, Marope further incorporates diverse jumping policies into cooperative game training. We evaluate our approach on Unitree G1 humanoid robots in both simulation and real-world settings. Experimental results demonstrate that Marope outperforms various baselines, achieving more efficient and stable rope manipulation as well as more robust and adaptable cooperation with varied players.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI