日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2510.10851

選好条件付き多目的強化学習によるヒューマノイド歩行の指令追従と力コンプライアンスの統合

Preference-Conditioned Multi-Objective RL for Integrated Command Tracking and Force Compliance in Humanoid Locomotion

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイド歩行を指令追従と外力への柔軟な応答の多目的最適化として定式化し、ユーザー指定の選好入力で両者をトレードオフできる単一の全方向歩行ポリシーを強化学習で獲得する手法を提案した。

詳しい要約

1. どんなもの?

- ヒューマノイドのlocomotionを、command trackingと外部力へのcomplianceの多目的最適化問題として定式化した研究。 - preference-conditioned multi-objective RL (MORL) フレームワークを導入し、単一のomnidirectional locomotion policyで両者のトレードオフをユーザ指定のpreference入力により調整可能にする。 - 外部力はvelocity-resistance factorでモデル化し、reward設計を一貫させる。 - encoder-decoder構造で、deployable observationsからtask-relevant privileged featuresを推論する。

2. 先行研究と比べてどこがすごい?

- 既存のRLアプローチは主にrobustnessを重視し、外部力に抵抗するpolicyを生成するが、complianceに欠ける。これは本質的に不安定なhumanoidでは特に困難。 - 本研究はcommand trackingとforce complianceのバランスを明示的な多目的最適化として扱い、単一policyでpreferenceに応じたトレードオフを可能にする点が異なる。 - 具体的な先行研究名や定量的比較は要旨からは不明。

3. 技術・手法の肝は?

- humanoid locomotionをcommand trackingとexternal force complianceの多目的最適化問題として定式化。 - preference-conditioned MORLにより、ユーザ指定のpreference入力で単一のomnidirectional locomotion policyのトレードオフを制御。 - 外部力をvelocity-resistance factorでモデル化し、一貫したreward設計を実現。 - encoder-decoder構造を採用し、deployable observationsからtask-relevant privileged featuresを推論して訓練に活用。

4. どうやって有効だと検証した?

- simulationとreal-world experimentsの両方でhumanoid robotを用いて検証。 - simulationおよびhardwareの実験結果から、フレームワークが安定的に訓練でき、deployableなpreference-conditioned humanoid locomotionを実現することを示した。 - 具体的な評価指標や比較対象は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - ただし、既存手法がrobustness偏重でcomplianceに欠ける点を課題として挙げ、humanoidの不安定性ゆえにcomplianceが特に困難であると議論している。 - preference-conditioned MORLの限界や失敗事例、今後の課題についての記述は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な先行研究は明示されていない。 - 関連手法として、multi-objective RL (MORL)、preference-conditioned RL、privileged learning / teacher-studentによるencoder-decoder構造、sim-to-real transfer、humanoid locomotionのRL研究が挙げられる。 - 同分野の定番として、humanoid locomotion向けのmodel-free RLやdomain randomizationを用いたsim-to-real研究を次に読む候補とする。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tingxuan Leng, Yushi Wang, Tinglong Zheng, Changsheng Luo, Mingguo Zhao

分類: cs.RO

原文アブストラクト

Humanoid locomotion requires not only accurate command tracking for navigation but also compliant responses to external forces during human interaction. Despite significant progress, existing RL approaches mainly emphasize robustness, yielding policies that resist external forces but lack compliance particularly challenging for inherently unstable humanoids. In this work, we address this by formulating humanoid locomotion as a multi-objective optimization problem that balances command tracking and external force compliance. We introduce a preference-conditioned multi-objective RL (MORL) framework that enables a single omnidirectional locomotion policy to trade off between command following and force compliance via a user-specified preference input. External forces are modeled via velocity-resistance factor for consistent reward design, and training leverages an encoder-decoder structure that infers task-relevant privileged features from deployable observations. We validate our approach in both simulation and real-world experiments on a humanoid robot. Experimental results in simulation and on hardware show that the framework trains stably and enables deployable preference-conditioned humanoid locomotion.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI