日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2604.15938

VADF: 視覚適応型拡散ポリシーフレームワークによる効率的なロボット操作

VADF: Vision-Adaptive Diffusion Policy Framework for Efficient Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

拡散ポリシーの学習収束の遅さと推論タイムアウト問題を解決するため、訓練時のサンプル難易度に応じた重み付けと、推論時の視覚に基づくタスク分割により、収束ステップ数を削減し早期成功率を向上させるフレームワークを提案した。

詳しい要約

1. どんなもの?

- 拡散ポリシー(diffusion policy)の訓練と推論を効率化する枠組み「VADF」を提案。 - 視覚駆動の二重適応フレームワークで、モデル非依存の設計。 - 訓練ではAdaptive Loss Network (ALN)によりサンプル難易度をリアルタイム評価し、hard negative miningで重み付きサンプリング。 - 推論ではHierarchical Vision Task Segmenter (HVTS)がタスクを視覚入力に基づき多段階のサブ指示に分解し、行動系列を単純/複雑なサブタスクに適応分割。 - 単純な行動には短いノイズスケジュールと長い直接実行を、複雑な行動には長いノイズステップと短い実行を割り当て、計算オーバーヘッドを削減し早期成功率を向上。

2. 先行研究と比べてどこがすごい?

- 従来の拡散ポリシーは一様サンプリングとサンプル難易度認識の欠如により、hard negative class imbalanceが生じ、訓練収束が遅く推論タイムアウトが頻発。 - VADFは訓練でALNによる難易度定量化と重み付きサンプリングを行い、収束ステップを大幅に削減。 - 推論ではHVTSによる適応的分割で計算負荷を劇的に低減し、早期成功率を大幅改善。 - モデル非依存設計により任意の拡散ポリシーアーキテクチャに統合可能。

3. 技術・手法の肝は?

- 訓練: Adaptive Loss Network (ALN) が軽量MLPベースの損失予測器として各ステップのサンプル難易度をリアルタイムに定量化。 - hard negative miningに導かれ、高損失領域を優先する重み付きサンプリングを実施し、適応的重み更新を可能に。 - 推論: Hierarchical Vision Task Segmenter (HVTS) が高レベルタスク指示を視覚入力に基づき多段階の低レベルサブ指示に分解。 - 行動系列を単純/複雑なサブタスクに適応分割し、単純には短いノイズスケジュールと長い直接実行、複雑には長いノイズステップと短い実行を割り当て。

4. どうやって有効だと検証した?

- 要旨からは不明(具体的な実験設定や評価指標、データセット、比較手法についての記述がない)。

5. 議論はある?

- 要旨からは不明(限界や議論、今後の課題についての記述がない)。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の定番として、Diffusion Policy (Chi et al., 2023) や、hard negative mining、hierarchical reinforcement learning、vision-language models を用いたタスク分解に関する論文が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xinglei Yu, Zhenyang Liu, Shufeng Nan, Simo Wu, Yanwei Fu

分類: cs.RO

原文アブストラクト

Diffusion policies are becoming mainstream in robotic manipulation but suffer from hard negative class imbalance due to uniform sampling and lack of sample difficulty awareness, leading to slow training convergence and frequent inference timeout failures. We propose VADF (Vision-Adaptive Diffusion Policy Framework), a vision-driven dual-adaptive framework that significantly reduces convergence steps and achieves early success in inference, with model-agnostic design enabling seamless integration into any diffusion policy architecture. During training, we introduce Adaptive Loss Network (ALN), a lightweight MLP-based loss predictor that quantifies per-step sample difficulty in real time. Guided by hard negative mining, it performs weighted sampling to prioritize high-loss regions, enabling adaptive weight updates and faster convergence. In inference, we design the Hierarchical Vision Task Segmenter (HVTS), which decomposes high-level task instructions into multi-stage low-level sub-instructions based on visual input. It adaptively segments action sequences into simple and complex subtasks by assigning shorter noise schedules with longer direct execution sequences to simple actions, and longer noise steps with shorter execution sequences to complex ones, thereby dramatically reducing computational overhead and significantly improving the early success rate.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI