日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2607.11027

SegDiff: セグメント化軌道拡散による一貫性と適応性を備えたロボット操作

SegDiff: Segmented Trajectory Diffusion for Consistent and Adaptive Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

模倣学習において、連続予測とキーポーズ予測の利点を統合し、キーポーズ間の軌道を拡散モデルで予測する閉ループ視覚運動ポリシーを提案。動的環境への適応性と制御安定性を向上させた。

詳しい要約

1. どんなもの?

SegDiffは、模倣学習によるロボット操作のための閉ループ視覚運動ポリシーである。デモンストレーションをキーポーズ間のモーションセグメントに分解し、現在の状態から次のキーポーズまでの連続軌道を予測することで、長期的な予測とリアルタイムな修正を両立する。拡散モデルとDDIM inversionを利用したDynamic Temporal Ensembling機構により、動的環境への適応とマルチモーダルサンプリングによる不連続性の緩和を実現する。

2. 先行研究と比べてどこがすごい?

既存の連続予測手法は予測期間が短く累積誤差が生じ、マルチモーダルな行動分布の扱いが難しい。一方、キーポーズベースの手法は外部プランナーが必要でリアルタイム性に欠ける。SegDiffは両パラダイムの利点を統合し、長期的な予測とリアルタイムな修正を同時に実現する点が新しい。

3. 技術・手法の肝は?

手法の核は、デモンストレーションをキーポーズ間のセグメントに分解し、現在状態から次のキーポーズまでの連続軌道を予測すること。さらに、拡散モデルとDDIM inversionを用いたDynamic Temporal Ensemblingにより、動的環境への応答とマルチモーダルサンプリングによる不連続性を緩和する。

4. どうやって有効だと検証した?

シミュレーションと実世界の複数のシナリオで、既存手法と比較して有意な性能向上を示した。具体的なタスクや評価指標は要旨からは不明。

5. 議論はある?

要旨からは、長期的な時間依存関係の推論とリアルタイム適応性、制御安定性の両立が示されているが、限界や課題については言及されていない。

6. 次に読むべき論文は?

要旨で参照されている関連手法として、拡散モデルを用いた軌道予測手法や、キーポーズベースの模倣学習手法が挙げられる。具体的には、Diffusion PolicyやKeypose-based Imitation Learningなどが関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haidong Cao, Wenjun Cao, Quanhao Li, Sicheng Xie, Zhiying Du, Jiaqi Leng, Zuxuan Wu, Yu-Gang Jiang

分類: cs.RO

原文アブストラクト

Imitation learning enables robots to acquire manipulation skills from demonstrations by mapping observations to actions. Existing approaches predict either short-horizon continuous action sequences or discrete keyposes. However, continuous prediction methods suffer from compounding errors due to short prediction horizons and struggle with multi-modal action distributions, whereas keypose-based methods necessitate an external planner, constraining real-time applicability. To address these challenges, we introduce SegDiff, a closed-loop visuomotor policy that integrates the strengths of both paradigms. SegDiff decomposes demonstrations into motion segments between keyposes and learns to predict the continuous trajectory from the current state to the next keypose, enabling long-horizon prediction with real-time refinement. Furthermore, we leverage the capability of diffusion models and DDIM inversion to propose a Dynamic Temporal Ensembling mechanism, which allows the policy to efficiently respond to dynamic environments and mitigate discontinuities caused by inconsistent multi-modal sampling. SegDiff demonstrates significant performance gains over existing approaches across various simulated and real-world scenarios, indicating its strong ability to reason over extended temporal dependencies while maintaining real-time adaptability and control stability.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI