日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

模倣学習/データ生成arXiv:2605.01232

模倣学習のための高忠実度合成デモンストレーション生成の原理的アプローチ

A Principled Approach for Creating High-fidelity Synthetic Demonstrations for Imitation Learning

シェア:XThreadsFacebookLINEはてブBluesky

3Dガウススプラッティングと動的運動プリミティブを組み合わせ、専門家の軌道構造を保ちつつ多様な合成デモを生成するフレームワークを提案。障害物回避も考慮し、接触を伴う操作タスクの学習に有効なデータを生成する。

詳しい要約

1. どんなもの?

単一のexpert trajectoryと短いmulti-view scanから、3D Gaussian Splatting (3DGS) を用いて高忠実度の合成demonstrationを生成する枠組み。expert trajectoryをstrong priorとして扱い、Dynamic Movement Primitives (DMPs) でモデル化し、再構成された3DGSシーン内で新しいgoal、object configuration、viewpointにretargetする。これによりphase-consistentでshape-preservingな多様なdemonstrationを生成する。

2. 先行研究と比べてどこがすごい?

既存の3DGSベース合成はsampling-based plannerやtrajectory optimizationで新動作を生成し、expertの経路から大きく逸脱しがちで、contact-richやshape-sensitiveなmanipulationに重要な時空間構造を失い、多様性が下流のpolicy learningを害することがあった。提案法はexpert trajectoryをstrong priorとして保持し、逸脱を最小化しつつ多様性を生む点が優れる。

3. 技術・手法の肝は?

expert trajectoryをDMPsでモデル化し、3DGSシーン内で新goal等にretarget。位相整合・形状保存を構造的に保証。さらに3DGS表現が誘起する連続密度場上で直接動作するanalytic obstacle-aware DMP定式化を導入し、追加のscene representationなしで衝突回避とphotorealistic rendering・geometric reasoningを統合。

4. どうやって有効だと検証した?

Spot mobile manipulatorを用い、trajectory fidelityへの感度が増大する3つのmanipulationタスクで評価。plannerベースおよびoptimizationベースの合成と比較し、提案法はより低いdeviationとcollision rateを示し、diffusion-based visuomotor policiesの訓練で高いtask successを達成。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されているplanner-based synthesis、trajectory optimization、3D Gaussian Splatting (3DGS)、Dynamic Movement Primitives (DMPs)、diffusion-based visuomotor policies。関連手法としてsampling-based plannerやtrajectory optimizationの論文、3DGSの原論文、DMPsの原論文、diffusion policyの論文が次に読むべき候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Moniruzzaman Akash, Momotaz Begum

分類: cs.RO

原文アブストラクト

Recent advances in 3D Gaussian Splatting (3DGS) have enabled visually realistic demonstration generation from a single expert trajectory and a short multi-view scan. However, existing 3DGS-based synthesis pipelines typically generate new motions using sampling-based planners or trajectory optimization, which often deviate substantially from the expert's demonstrated path. While such deviations may be acceptable for tasks insensitive to motion shape, they discard subtle spatial and temporal structure that is critical for contact-rich and shape-sensitive manipulation, causing increased demonstration diversity to harm downstream policy learning. We argue that demonstration synthesis should treat the expert trajectory as a strong prior. Building on this principle, we propose a framework that synthesizes diverse task demonstrations while explicitly preserving expert motion structure. We model the expert trajectory using Dynamic Movement Primitives (DMPs) and retarget it to new goals, object configurations, and viewpoints within a reconstructed 3DGS scene, yielding phase-consistent, shape-preserving motion by construction. To safely realize this expert-preserving diversity in cluttered scenes, we introduce an analytic obstacle-aware DMP formulation that operates directly on the continuous density field induced by the 3DGS representation. This enables collision avoidance while minimally perturbing the nominal expert motion, unifying photorealistic rendering and geometric reasoning without additional scene representations. We evaluate our approach on a Spot mobile manipulator across three manipulation tasks with increasing sensitivity to trajectory fidelity. Compared to planner- and optimization-based synthesis, our method produces trajectories with lower deviation and collision rates and yields higher task success when training diffusion-based visuomotor policies.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI