日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2512.16446

E-SDS:環境認識型の見て・やって・整理する強化学習によるヒューマノイド歩行の自動報酬設計

E-SDS: Environment-aware See it, Do it, Sorted - Automated Environment-Aware Reinforcement Learning for Humanoid Locomotion

シェア:XThreadsFacebookLINEはてブBluesky

地形センサー情報をVLMに統合し、環境に応じた報酬関数を自動生成することで、ヒューマノイドの階段降下を含む複雑地形での歩行を実現した。

詳しい要約

1. どんなもの?

- ヒューマノイド locomotion の reward design を自動化する VLM ベースのフレームワーク E-SDS を提案 - 名前は Environment-aware See it, Do it, Sorted の略 - VLM と real-time terrain sensor analysis を統合し、perceptive locomotion policy 用の reward function を自動生成 - example videos を grounding に利用 - Unitree G1 humanoid で評価

2. 先行研究と比べてどこがすごい?

- 既存の VLM ベース reward 自動設計は本質的に blind で、複雑地形に必要な環境知覚を欠く - E-SDS は real-time terrain sensor analysis を組み込み、この perception gap を埋める - 手設計 reward や non-perceptive な自動化 baseline が失敗した stair descent を唯一成功させた - 全地形で velocity tracking error を 51.9-82.6% 削減 - reward design の人的工数を days から 2 時間未満に短縮

3. 技術・手法の肝は?

- VLM による reward function 自動生成に、real-time terrain sensor analysis を統合 - example videos を grounding として利用し、perceptive locomotion policy の学習を促す reward を生成 - 環境知覚を reward 設計に反映させる点が肝 - 詳細なアルゴリズム構成は要旨からは不明

4. どうやって有効だと検証した?

- Unitree G1 humanoid を用い、simple, gaps, obstacles, stairs の 4 地形で評価 - 手設計 reward および non-perceptive な自動化 baseline と比較 - stair descent を E-SDS のみが成功 - 全地形で velocity tracking error を 51.9-82.6% 削減 - 設計工数を days から 2 時間未満に短縮したと報告

5. 議論はある?

- 知覚統合により複雑地形での robustness と能力が向上することを示唆 - 一方、4 地形・単一ハードウェア (Unitree G1) での評価に限られ、一般化可能性は要旨からは不明 - VLM 生成 reward の品質や再現性、実環境への転移に関する議論は要旨からは不明

6. 次に読むべき論文は?

- 本論文が比較対象とする VLM ベースの reward 自動設計手法 (non-perceptive automated baseline) - 手設計 reward による locomotion 研究 - perceptive locomotion / terrain-aware locomotion の既存研究 - VLM を用いた reward design に関する関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Enis Yalcin, Joshua O'Hara, Maria Stamatopoulou, Chengxu Zhou, Dimitrios Kanoulas

分類: cs.RO, cs.AI

原文アブストラクト

Vision-language models (VLMs) show promise in automating reward design in humanoid locomotion, which could eliminate the need for tedious manual engineering. However, current VLM-based methods are essentially "blind", as they lack the environmental perception required to navigate complex terrain. We present E-SDS (Environment-aware See it, Do it, Sorted), a framework that closes this perception gap. E-SDS integrates VLMs with real-time terrain sensor analysis to automatically generate reward functions that facilitate training of robust perceptive locomotion policies, grounded by example videos. Evaluated on a Unitree G1 humanoid across four distinct terrains (simple, gaps, obstacles, stairs), E-SDS uniquely enabled successful stair descent, while policies trained with manually-designed rewards or a non-perceptive automated baseline were unable to complete the task. In all terrains, E-SDS also reduced velocity tracking error by 51.9-82.6%. Our framework reduces the human effort of reward design from days to less than two hours while simultaneously producing more robust and capable locomotion policies.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI