日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2603.02623

Uni-Skill: 汎用ロボット操作のための自己進化型スキルリポジトリの構築

Uni-Skill: Building Self-Evolving Skill Repository for Generalizable Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

固定スキルライブラリに依存せず、既存スキルが不十分な場合に新しいスキルを自動生成・追加することで、適応的なプランニングを可能にする統一スキル中心フレームワークを提案した。

詳しい要約

1. どんなもの?

- ロボットの compositional task を skill 単位で計画・実行する Unified Skill-centric framework。 - 固定 skill library ではなく、不足時に新 skill の実装を要求し、自己拡張する点が特徴。 - SkillFolder と呼ぶ VerbNet 着想の階層的 skill taxonomy を大規模未構造ロボット動画から構築。 - 自動注釈付き demonstration を taxonomy に格納し、offline 構造検索で few-shot skill inference を実現。

2. 先行研究と比べてどこがすごい?

- 従来の skill-centric 手法は固定 skill library に依存し、新規 task への適応に人手介入が必要だった。 - Uni-Skill は既存 skill で不足する場合に新 skill 実装を要求し、self-augmented skill library で適応的計画を可能にする。 - skill 獲得を非効率な手動注釈から効率的な offline 構造検索へ転換。 - 展開時 demonstration なしの few-shot skill inference を可能にし、VLM-based skill-centric 手法を上回る。

3. 技術・手法の肝は?

- 計画モジュールが不足 skill を検出し、新 skill 実装を要求する skill-aware planning。 - SkillFolder: VerbNet に着想を得た階層的 skill taxonomy を大規模未構造ロボット動画から構築。 - taxonomy に大規模自動注釈 demonstration を格納し、offline 構造検索で例を取得。 - 取得例が behavior pattern の semantic supervision と spatial trajectory の fine-grained reference を提供。 - これにより deployment-time demonstration なしの few-shot skill inference を実現。

4. どうやって有効だと検証した?

- simulation と real-world の両設定で包括的実験を実施。 - 既存 VLM-based skill-centric 手法と比較し state-of-the-art 性能を確認。 - 広範な新規 task に対する zero-shot generalization と高度な reasoning 能力を示した。 - 具体的な benchmark 名や評価指標は要旨からは不明。

5. 議論はある?

- 固定 skill library の限界を克服し、自己拡張する skill repository の有効性を主張。 - 手動注釈から offline 構造検索へのパラダイム転換を強調。 - ただし skill 実装の自動化の限界、taxonomy の網羅性、実世界での安全性・失敗事例などの議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている VLM-based skill-centric approaches の代表的研究。 - VerbNet に着想を得た SkillFolder の基盤として VerbNet 関連研究。 - compositional task の generalization を扱う foundation model ベースのロボット操作研究。 - 具体的な論文名は要旨からは不明のため、同分野の定番として skill-centric manipulation や VLM-based planning の文献を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Senwei Xie, Yuntian Zhang, Ruiping Wang, Xilin Chen

分類: cs.RO, cs.LG

原文アブストラクト

While skill-centric approaches leverage foundation models to enhance generalization in compositional tasks, they often rely on fixed skill libraries, limiting adaptability to new tasks without manual intervention. To address this, we propose Uni-Skill, a Unified Skill-centric framework that supports skill-aware planning and facilitates automatic skill evolution. Unlike prior methods that restrict planning to predefined skills, Uni-Skill requests for new skill implementations when existing ones are insufficient, ensuring adaptable planning with self-augmented skill library. To support automatic implementation of diverse skills requested by the planning module, we construct SkillFolder, a VerbNet-inspired repository derived from large-scale unstructured robotic videos. SkillFolder introduces a hierarchical skill taxonomy that captures diverse skill descriptions at multiple levels of abstraction. By populating this taxonomy with large-scale, automatically annotated demonstrations, Uni-Skill shifts the paradigm of skill acquisition from inefficient manual annotation to efficient offline structural retrieval. Retrieved examples provide semantic supervision over behavior patterns and fine-grained references for spatial trajectories, enabling few-shot skill inference without deployment-time demonstrations. Comprehensive experiments in both simulation and real-world settings verify the state-of-the-art performance of Uni-Skill over existing VLM-based skill-centric approaches, highlighting its advanced reasoning capabilities and strong zero-shot generalization across a wide range of novel tasks.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI