日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2606.08414

PACT: 拡散ポリシーの身体的操作における自己進化型物理安全性アライメント

PACT: Self-Evolving Physical Safety Alignment for Diffusion Policies in Embodied Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みの拡散ポリシーを、デモデータや報酬なしで制約適合領域に投影する自己進化型の後処理フレームワークを提案し、安全性違反を平均31.0%削減しつつタスク成功率を30.7%向上させた。

詳しい要約

1. どんなもの?

- 拡散ポリシー(diffusion policies)の物理的安全制約を満たすための自己進化型事後学習フレームワーク「PACT」を提案。 - 事前学習済み拡散ポリシーを制約実行可能領域に投影し、デモデータやタスク報酬にアクセスせずに安全制約を満たす。 - シミュレーションと実世界の embodied manipulation ベンチマークで安全性違反を平均31.0%削減し、タスク成功率を30.7%向上。

2. 先行研究と比べてどこがすごい?

- 既存手法は訓練中に早期に安全を課すか、テスト時に外部ガードレールで反応的に制約するため、ポリシーの表現力とスケーラビリティが制限される。 - PACTは事後学習フレームワークとして、デモデータやタスク報酬なしで制約勾配を蒸留し、安全性と性能のトレードオフを緩和。 - 理論的に有界なポリシーシフトと単調改善を保証し、破滅的忘却を軽減。

3. 技術・手法の肝は?

- 制約勾配を逆KL目的関数(reverse-KL objective)とタイムステップ全体にわたる密な監督で拡散モデルに蒸留。 - カリキュラム学習を導入し、制約を段階的に厳しくしながら、理論的に有界なポリシーシフトと単調改善を維持。 - これにより破滅的忘却を緩和し、安全性と性能のトレードオフを軽減。

4. どうやって有効だと検証した?

- シミュレーションおよび実世界の embodied manipulation ベンチマークで評価。 - 安全性違反を平均31.0%削減し、タスク成功率を30.7%向上させた。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究や関連手法は明示されていない。同分野の定番として、Diffusion Policy、Safe Reinforcement Learning、Constrained Optimization などが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Lingxuan Wu, Zijian Zhu, Lizhong Wang, Chengyang Ying, Huayu Chen, Xiao Yang, Fangming Liu, Jun Zhu

分類: cs.RO, cs.AI

原文アブストラクト

Diffusion policies have achieved remarkable success in robotic manipulation, yet they often fail to satisfy strict physical constraints required for safe deployment. Existing approaches impose safety either prematurely during training or reactively via external guardrails at test time, limiting policy expressivity and overall scalability. We propose Physical safety Alignment for Constrained Trajectories (PACT), a self-evolving post-training framework that projects pretrained diffusion policies onto constraint-feasible regions without accessing demonstration data or task rewards. PACT distills constraint gradients into the diffusion model through a reverse-KL objective with dense supervision across timesteps. It incorporates a curriculum that progressively tightens constraints while maintaining theoretically bounded policy shift and monotone improvement, mitigating the safety-performance trade-off from catastrophic forgetting. On simulated and real-world embodied manipulation benchmarks, PACT significantly reduces safety violations by 31.0% on average while improving task success by 30.7%.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI