日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

スキル発見arXiv:2510.06203

参照データに基づくスキル発見

Reference Grounded Skill Discovery

シェア:XThreadsFacebookLINEはてブBluesky

参照データを用いて意味のある潜在空間でスキルを発見するRGSDを提案し、高次元ヒューマノイドの多様な動作生成とスタイル制御を実現した。

詳しい要約

1. どんなもの?

- 高DoFエージェント向けの教師なしskill discoveryアルゴリズム - 名称はReference-Grounded Skill Discovery (RGSD) - reference dataを用いて意味的に有意なlatent spaceにskill discoveryを接地させる - 対象はsimulated SMPL humanoid(359-D observations, 69-D actions) - 目的は高次元化で爆発する探索空間を、意味的有意性で誘導すること

2. 先行研究と比べてどこがすごい?

- 従来のunsupervised skill discoveryは高DoF化に伴い探索空間が指数的に増大し、意味あるskillのmanifoldは限定的という課題があった - RGSDはreference dataによるsemantic groundingでこの課題に対処 - imitation-learning baselinesと比較し、下流locomotionでuser-specified style commandsを忠実に満たし優位 - baselinesはcommanded styleの維持にしばしば失敗 - 単なる模倣ではなく、reference behaviorsの模倣と意味的に関連する多様なbehaviorの発見を同時に行える点が特徴

3. 技術・手法の肝は?

- contrastive pretrainingによりmotionsをunit hypersphere上に埋め込む - 各reference trajectoryを異なるdirectionへクラスタリング - このgroundingにより、reference behaviorsのimitationとsemantically relatedな多様behaviorの発見を同時に実現 - 詳細なloss設計やarchitectureは要旨からは不明

4. どうやって有効だと検証した?

- simulated SMPL humanoid(359-D observations, 69-D actions)で評価 - walking, running, punching, sidesteppingなどのskill模倣に成功し、これらのvariationsも発見 - 下流locomotion tasksで、user-specified style commandsを忠実に満たすことを確認 - imitation-learning baselinesを上回る性能を示し、baselinesはcommanded style維持に失敗することが多い

5. 議論はある?

- 高DoFにおける探索空間の指数的増大と意味あるskill manifoldの限定性への対処が動機 - semantic meaningfulnessが高次元探索の誘導に不可欠という立場 - 限界、失敗事例、計算コスト、reference data依存性などの詳細は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されているimitation-learning baselines(具体的名称は要旨からは不明) - 関連手法としてunsupervised skill discoveryの代表的手法(例: DIAYN, DADS) - contrastive learningを用いたmotion embedding関連研究 - SMPL humanoidを用いたlocomotion研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Seungeun Rho, Aaron Trinh, Danfei Xu, Sehoon Ha

分類: cs.LG, cs.AI

原文アブストラクト

Scaling unsupervised skill discovery algorithms to high-DoF agents remains challenging. As dimensionality increases, the exploration space grows exponentially, while the manifold of meaningful skills remains limited. Therefore, semantic meaningfulness becomes essential to effectively guide exploration in high-dimensional spaces. In this work, we present Reference-Grounded Skill Discovery (RGSD), a novel algorithm that grounds skill discovery in a semantically meaningful latent space using reference data. RGSD first performs contrastive pretraining to embed motions on a unit hypersphere, clustering each reference trajectory into a distinct direction. This grounding enables skill discovery to simultaneously involve both imitation of reference behaviors and the discovery of semantically related diverse behaviors. On a simulated SMPL humanoid with $359$-D observations and $69$-D actions, RGSD successfully imitates skills such as walking, running, punching, and sidestepping, while also discover variations of these behaviors. In downstream locomotion tasks, RGSD leverages the discovered skills to faithfully satisfy user-specified style commands and outperforms imitation-learning baselines, which often fail to maintain the commanded style.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI