日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2505.12679

ドリブルマスター:脚式移動による俊敏なヒューマノイドドリブルの学習

Dribble Master: Learning Agile Humanoid Dribbling through Legged Locomotion

シェア:XThreadsFacebookLINEはてブBluesky

二段階カリキュラム強化学習と仮想カメラモデルを用いて、ヒューマノイドロボットがシミュレーションでドリブル技能を獲得し、実機へ転移できることを示した研究。

詳しい要約

1. どんなもの?

- ヒューマノイドロボットによるサッカードリブルを強化学習で獲得する研究。 - 動的バランスを保ちながら器用なボール操作を必要とする難タスク。 - 2段階カリキュラム学習を提案し、シミュレーションで訓練後、実機に転送。 - 仮想カメラモデルとヒューリスティック報酬でボール知覚を促進。

2. 先行研究と比べてどこがすごい?

- 従来のルールベース手法は固定歩行パターンに依存し、リアルタイムのボールダイナミクスへの適応が限定的。 - 提案手法は明示的なダイナミクスや事前定義軌道なしでドリブルスキルを獲得。 - 仮想カメラモデルで実機の視野・知覚制約をシミュレーション中に模擬。 - ヒューリスティック報酬で能動的センシングを促し、連続的なボール知覚を実現。

3. 技術・手法の肝は?

- 2段階カリキュラム学習:第1段階で基本移動スキルを学習、第2段階でアジルドリブルのためにポリシーを微調整。 - シミュレーション内に仮想カメラモデルを導入し、実機の視野と知覚制約を再現。 - ヒューリスティック報酬を設計し、能動的センシングを奨励して広い視野範囲を促進。 - ポリシーはシミュレーションで訓練され、実機ヒューマノイドロボットに転送。

4. どうやって有効だと検証した?

- シミュレーションで訓練したポリシーを実機ヒューマノイドロボットに転送。 - 複数環境で効果的なボール操作を実現し、柔軟で視覚的に魅力的なドリブル行動を確認。 - 実験結果により、提案手法が有効であることを実証。

5. 議論はある?

- 強化学習がアジルなヒューマノイドサッカーロボット開発に持つ可能性を強調。 - 具体的な議論や限界については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、ルールベース手法、強化学習によるロコモーション、カリキュラム学習、シミュレーションから実機への転送(sim-to-real)に関する論文が次に読むべき候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhuoheng Wang, Jinyin Zhou, Qi Wu

分類: cs.RO

原文アブストラクト

Humanoid soccer dribbling is a highly challenging task that demands dexterous ball manipulation while maintaining dynamic balance. Traditional rule-based methods often struggle to achieve accurate ball control due to their reliance on fixed walking patterns and limited adaptability to real-time ball dynamics. To address these challenges, we propose a two-stage curriculum learning framework that enables a humanoid robot to acquire dribbling skills without explicit dynamics or predefined trajectories. In the first stage, the robot learns basic locomotion skills; in the second stage, we fine-tune the policy for agile dribbling maneuvers. We further introduce a virtual camera model in simulation that simulates the field of view and perception constraints of the real robot, enabling realistic ball perception during training. We also design heuristic rewards to encourage active sensing, promoting a broader visual range for continuous ball perception. The policy is trained in simulation and successfully transferred to a physical humanoid robot. Experiment results demonstrate that our method enables effective ball manipulation, achieving flexible and visually appealing dribbling behaviors across multiple environments. This work highlights the potential of reinforcement learning in developing agile humanoid soccer robots. Additional details and videos are available at https://zhuoheng0910.github.io/dribble-master/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI