日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2605.01448

分解と再構成:既存能力から新スキルを推論するクロスタスクロボット操作

Decompose and Recompose: Reasoning New Skills from Existing Abilities for Cross-Task Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

見たタスクのデモを原子スキルと行動のペアに分解し、未見タスクに対してスキルを再構成して推論するフレームワークを提案。ゼロショットのクロスタスク汎化を実現した。

詳しい要約

1. どんなもの?

- クロスタスク汎化を目指すロボットマニピュレーションのフレームワーク。 - 見たタスクのデモから原子スキルと行動のペアを中間表現として抽出。 - 未見タスクに対してスキルを再構成し、推論する。 - パラメータ更新なしでゼロショット汎化を実現。

2. 先行研究と比べてどこがすごい?

- 既存のin-context learningは低レベル連続行動列のみを文脈とし、スキル知識を捉えられず表面的な軌道模倣に陥る。 - 提案手法は原子スキル-行動ペアを中間表現とし、構成可能なスキル知識を明示的に扱う。 - これにより未見タスクへの合成的推論が可能。

3. 技術・手法の肝は?

- 見たデモを解釈可能なスキル-行動アラインメントに分解。 - 視覚意味検索とプランニングエージェントのスキル列を組み合わせ、タスク適応型動的デモライブラリを構築。 - 不足スキルパターンを補うカバレッジ考慮型静的ライブラリを併用。 - スキル包括的デモが合成的推論を誘発し、スキル構成と実行順序を決定。

4. どうやって有効だと検証した?

- AGNOSTOSベンチマークと実世界環境で実験。 - ゼロショットクロスタスク汎化能力を検証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- in-context learning for robotic manipulation - AGNOSTOS benchmark - planning agent - visual-semantic retrieval

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xitie Zhang, Aming Wu, Yahong Han

分類: cs.RO, cs.CV

原文アブストラクト

Cross-task generalization is a core challenge in open-world robotic manipulation, and the key lies in extracting transferable manipulation knowledge from seen tasks. Recent in-context learning approaches leverage seen task demonstrations to generate actions for unseen tasks without parameter updates. However, existing methods provide only low-level continuous action sequences as context, failing to capture composable skill knowledge and causing models to degenerate into superficial trajectory imitation. We propose Decompose and Recompose, a skill reasoning framework using atomic skill-action pairs as intermediate representations. Our approach decomposes seen demonstrations into interpretable skill--action alignments, enabling the model to recompose these skills for unseen tasks through compositional reasoning. Specifically, we construct a task-adaptive dynamic demonstration library via visual-semantic retrieval combined with skill sequences from a planning agent, complemented by a coverage-aware static library to fill missing skill patterns. Together, these yield skill-comprehensive demonstrations that explicitly elicit compositional reasoning for skill composition and execution ordering. Experiments on the AGNOSTOS benchmark and real-world environments validate our method's zero-shot cross-task generalization capability.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI