日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2606.12814

Stubborn: 堅牢なモーション追従と転倒回復のための合理化・統合強化学習フレームワーク

Stubborn: A Streamlined and Unified Reinforcement Learning Framework for Robust Motion Tracking and Fall Recovery for Humanoids

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドのモーション追従と転倒回復を単一の強化学習フレームワークで統合し、確率的終了機構とサンプリング分布の動的再形成により、転倒状態からの回復探索を促進する手法を提案した。

詳しい要約

1. どんなもの?

- 人型ロボットの motion tracking と fall recovery を単一の強化学習フレームワークで実現する Stubborn を提案。 - 従来は別タスク・多段階訓練・専用 recovery reward や別ポリシーが必要だった。 - asymmetric Actor-Critic を採用し、3つの主要コンポーネントから成る。 - 実世界デモ用のプロジェクトページも提供。

2. 先行研究と比べてどこがすごい?

- 既存研究は motion tracking と fall recovery を別タスクとして扱い、多段階訓練や専用 recovery reward、別ポリシーを要した。 - 既存 RL は severe tracking failure 後に episode を即終了し、fallen 状態での recovery 探索が制限されていた。 - Stubborn はこれらを統一し、単一フレームワークで両立。 - 確率的終了機構と適応サンプリングで性能・ロバスト性を向上。

3. 技術・手法の肝は?

- asymmetric Actor-Critic アーキテクチャ。 - yaw-aligned tracking representation で global drift と heading 外乱への感度を低減し、gravity 関連の balance 情報を保持。 - Bernoulli-based probabilistic termination mechanism で様々な failure mode 下の fall-recovery 探索を促進。 - probabilistic termination と tracking-error 駆動の適応サンプリングで、難 motion segment や不安定状態の訓練効率を向上。

4. どうやって有効だと検証した?

- SOTA 手法との広範な比較と ablation studies を実施。 - Stubborn は competitive な性能を達成。 - 確率的終了機構と適応サンプリング戦略が性能・ロバスト性向上に寄与したことを示す。 - 実世界デモはプロジェクトページで参照可能。

5. 議論はある?

- 要旨からは不明。 - 想定される論点として、確率的終了のハイパーパラメータ感度、実機転移のギャップ、多様な failure mode への一般化が考えられるが、要旨には明記されていない。

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な SOTA 手法名は不明。 - 関連手法として、humanoid motion tracking や fall recovery における reinforcement learning ベースの既存研究、asymmetric Actor-Critic、probabilistic termination を用いる研究が挙げられる。 - 同分野の定番として、DeepMimic や AMP などの motion imitation 手法、humanoid fall recovery の RL 研究を参照するとよい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiao Ren, Yuhui Yang, Zongbiao Weng, Zhijie Liu, He Kong

分類: cs.RO, cs.AI

原文アブストラクト

Recent reinforcement learning approaches have shown great promise in improving humanoid motion tracking performance and achieving fall recovery under disturbances. However, most existing works treat motion tracking and fall recovery as different tasks and require multi-stage training with specialized recovery rewards and/or separate recovery policies. Moreover, existing reinforcement learning-based methods often terminate training episodes immediately after severe tracking failures, limiting recovery-oriented exploration in unstable or fallen states. To address the above issues, we propose Stubborn, a streamlined and unified reinforcement learning framework to achieve robust humanoid motion tracking and fall recovery. Specifically, Stubborn uses an asymmetric Actor-Critic architecture and consists of three major components. First, a yaw-aligned tracking representation is adopted to reduce sensitivity to global drift and heading disturbances while preserving gravity-related balance information. Second, we introduce a Bernoulli-based probabilistic termination mechanism that enables the policy to encourage exploration of fall-recovery behaviors under varying failure modes. Third, we propose a probabilistic termination and tracking-error-driven strategy that dynamically reshapes the sampling distribution based on tracking performance, increasing the training efficiency for difficult motion segments and unstable states. Extensive comparisons with SOTA methods and ablation studies show that Stubborn achieved competitive performance, and the proposed probabilistic termination mechanism and adaptive sampling strategy contributed to the performance and robustness gains. For real-world demonstrations, please refer to https://aislab-sustech.github.io/Stubborn/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI