日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2510.01661

SymSkill: データ効率的で反応的な長期マニピュレーションのための記号とスキルの共創

Symskill: Symbol and Skill Co-Invention for Data-Efficient and Reactive Long-Horizon Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

未ラベル・未分割のデモから記号抽象化とスキルを同時学習し、記号プランナでスキルを組み合わせてリアルタイムに失敗回復しながら長期タスクを実行するフレームワーク。

詳しい要約

1. どんなもの?

- 動的環境での多段階 manipulation を対象とした統合フレームワーク SymSkill の提案。 - ラベルなし・未分割の demonstrations から predicates, operators, skills を同時に学習する。 - offline で記号的抽象化と goal-oriented skills を学習し、online では symbolic planner で skill を構成・並べ替える。 - motion レベルと symbolic レベルの両方でリアルタイムに failure recovery を行う。 - compliant controller と組み合わせ、人や環境の外乱下でも安全な実行を狙う。

2. 先行研究と比べてどこがすごい?

- Imitation learning (IL) は reactive だが monolithic policies のため compositional generalization に欠ける。 - 古典的 task-and-motion planning (TAMP) は compositionality を持つが planning latency が高くリアルタイム failure recovery が困難。 - SymSkill は両者の利点を統合し、compositional generalization と real-time recovery を両立させる点が特徴。 - 未ラベル・未分割の demonstrations から predicates, operators, skills を jointly 学習する点も従来との差異として示される。

3. 技術・手法の肝は?

- offline フェーズで demonstrations から symbolic abstractions と goal-oriented skills を直接学習する。 - online フェーズでは学習済み predicates の conjunction を symbolic goal として与え、symbolic planner が skills を compose・reorder する。 - failure 時には motion レベルと symbolic レベルの双方でリアルタイムに recovery する仕組みを持つ。 - compliant controller を併用し、人・環境からの disturbance 下での安全な実行を支える。

4. どうやって有効だと検証した?

- RoboCasa simulation で 12 個の single-step tasks を 85% の success で実行。 - 追加データなしでそれらを multi-step plans に compose できることを確認。 - 実機 Franka robot で 5 分間の play data から学習し、goal specifications に基づく 12-step tasks を実行。 - code と追加分析が https://symskill.github.io/ で公開されている。

5. 議論はある?

- 要旨からは不明。 - 明示されているのは、dynamic environments での multi-step manipulation が依然 challenging であるという問題意識。 - IL の compositional generalization 欠如と TAMP の planning latency という対比が動機として述べられる。 - 限界や失敗事例、ablation 等の議論は要旨からは不明。

6. 次に読むべき論文は?

- 比較対象として挙げられている Imitation learning (IL) および task-and-motion planning (TAMP) の関連研究。 - 評価環境である RoboCasa simulation に関する研究。 - 実機実験で用いられた Franka robot 上の manipulation 研究。 - compliant controller に関連する安全な実行の研究。 - 要旨で個別論文名の参照はないため、上記は手法・環境・機体名ベースの候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yifei Simon Shao, Yuchen Zheng, Sunan Sun, Pratik Chaudhari, Vijay Kumar, Nadia Figueroa

分類: cs.RO

原文アブストラクト

Multi-step manipulation in dynamic environments remains challenging. Imitation learning (IL) is reactive but lacks compositional generalization, since monolithic policies do not decide which skill to reuse when scenes change. Classical task-and-motion planning (TAMP) offers compositionality, but its high planning latency prevents real-time failure recovery. We introduce SymSkill, a unified framework that jointly learns predicates, operators, and skills from unlabeled, unsegmented demonstrations, combining compositional generalization with real-time recovery. Offline, SymSkill learns symbolic abstractions and goal-oriented skills directly from demonstrations. Online, given a conjunction of learned predicates, it uses a symbolic planner to compose and reorder skills to achieve symbolic goals while recovering from failures at both the motion and symbolic levels in real time. Coupled with a compliant controller, SymSkill supports safe execution under human and environmental disturbances. In RoboCasa simulation, SymSkill executes 12 single-step tasks with 85% success and composes them into multi-step plans without additional data. On a real Franka robot, it learns from 5 minutes of play data and performs 12-step tasks from goal specifications. Code and additional analysis are available at https://symskill.github.io/ .

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI