日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習arXiv:2606.07012

タスク編集による汎用3D視覚運動ポリシー学習

Task Editing for Generalizable 3D Visuomotor Policy Learning

シェア:XThreadsFacebookLINEはてブBluesky

3D視覚運動ポリシーの学習効率を高めるため、タスクをシーン・スキル・オブジェクトに分解し再結合するデモ生成フレームワーク「Task-Edit」を提案した。実世界実験で、長期的操作タスクにおける汎化性能の向上を実証した。

詳しい要約

1. どんなもの?

- 3D visuomotor policy の学習のための demonstration 生成フレームワーク Task-Edit を提案する研究。 - タスクを scene, skill, object の3要素に分解し、それらを柔軟に再結合することで多様な trajectory を生成する。 - 長期的な manipulation タスクにおける汎化性能の向上を目指す。

2. 先行研究と比べてどこがすごい?

- 既存手法は object-centric な変換(物体の pose や scale の変更など)を用いてデータ効率を改善してきた。 - しかしそれらは元の scene 構造や skill 系列をほぼ保持するため、複雑なタスク向けの多様な scene-skill-object の組み合わせを合成する能力が限定的であった。 - Task-Edit は task-centric な編集視点から、これらの要素を再結合することで、よりスケーラブルな demonstration 生成を可能にする。

3. 技術・手法の肝は?

- タスクを scene, skill, object のコンポーネントに分解し、それらを柔軟に再結合する。 - これにより、多様な trajectory を生成し、長期的な manipulation タスクの汎化を改善する。 - 具体的なアルゴリズムや実装の詳細は要旨からは不明。

4. どうやって有効だと検証した?

- 実世界での広範な実験を通じて評価。 - 3つの利点を実証:(1) Effectiveness: 様々な実世界タスクとロボット embodiment で 3D visuomotor policy を大幅に改善。(2) Generalizability: 異なる scenario 設定へのモデル汎化を改善。(3) Applicability: 実世界で収集が難しい scenario(disturbance resistance, obstacle avoidance, unseen cluttered scenes)に対応可能。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な研究は明記されていない。 - 関連手法として、object-centric な変換を用いた demonstration 生成手法(例:object pose/scale の変更)が挙げられる。 - 同分野の定番として、3D visuomotor policy learning や demonstration generation に関する研究が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jian-Jian Jiang, YiHan Yang, Lan Wei, Yuming Luo, Xiao-Ming Wu, Xuhang Chen, Bin Fan, Dandan Zhang, Wei-Shi Zheng

分類: cs.RO

原文アブストラクト

3D visuomotor policies offer a promising direction for complex robotic manipulation, as depth maps and point clouds provide rich geometric information for spatial reasoning. However, their success often depends on large-scale real-world demonstrations, which are costly and time-consuming to collect. To this end, existing methods commonly use demonstration generation strategies to improve data efficiency by applying object-centric transformations to human-collected demonstrations, such as varying object poses or scales. While effective for local variation, these transformations largely preserve the original scene structure and skill sequence, limiting their ability to synthesize diverse scene-skill-object combinations for complex tasks. In this paper, we propose Task-Edit, a novel demonstration generation framework that generates diverse trajectories from a task-centric editing perspective. The key insight of Task-Edit is to decompose a task into scene, skill and object components, and flexibly recombine them. In this way, Task-Edit enables scalable demonstration generation and significantly improves generalization for long-horizon manipulation tasks. We evaluate Task-Edit through extensive real-world experiments and demonstrate three advantages: (1) Effectiveness: Task-Edit significantly improves 3D visuomotor policies across various real-world tasks and robot embodiments. (2) Generalizability: Task-Edit improves model generalization across different scenario setups. (3) Applicability: Task-Edit enables models to handle scenarios that are difficult to collect in the real world, including disturbance resistance, obstacle avoidance and unseen cluttered scenes.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI