日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2508.18268

SafeBimanual: 拡散モデルによる安全な両手マニピュレーションのための軌道最適化

SafeBimanual: Diffusion-based Trajectory Optimization for Safe Bimanual Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みの拡散モデルベース両手マニピュレーションポリシーに対し、VLMで安全制約を動的に設計しテスト時に軌道を最適化することで、危険動作を抑えつつ成功率を向上させるフレームワーク。

詳しい要約

1. どんなもの?

- 両腕マニピュレーション(bimanual manipulation)のための test-time trajectory optimization フレームワーク「SafeBimanual」 - 既存の diffusion-based bimanual manipulation policy に対し、推論時に安全制約を課す - 事前学習済み policy を再学習せずに適用可能な汎用フレームワーク - 家庭サービスや製造業での複雑な協調タスクを安全に遂行することを狙う

2. 先行研究と比べてどこがすごい?

- 近年の diffusion-based policy learning は action distribution のモデリングで高い性能を示すが、bimanual manipulation の物理的安全制約を無視していた - 危険なロボット挙動によりロボットや物体が損傷する問題があった - SafeBimanual は任意の事前学習済み diffusion-based bimanual policy に安全制約を後付けできる点が新しい - 安全性向上と成功率向上を同時に達成する点が先行研究と異なる

3. 技術・手法の肝は?

- test-time trajectory optimization により diffusion denoising process の guided sampling で軌道を最適化 - 異なる dual-arm cooperation patterns に対応した多様な cost functions を設計 - 物体の引き裂き(tearing objects)の回避 - 腕と物体間の衝突(collision)の回避 - vision-language model (VLM) を用いて cost functions をスケジューリング - keypoints と対応する pairwise relationship を指定 - タスク全体で最適な安全制約を動的に生成

4. どうやって有効だと検証した?

- RoboTwin の 8 つの simulated tasks で評価 - 成功率 13.7% 向上 - unsafe interactions 18.8% 削減 - state-of-the-art の diffusion-based 手法と比較 - 実世界 4 タスクでも実験 - 成功率 32.5% 向上を確認

5. 議論はある?

- 要旨からは不明(具体的な限界や失敗ケース、VLM のスケジューリング誤りへの議論は記述なし) - 安全性と成功率の両立を主張しているが、cost function 設計の一般性や実環境での安全性保証範囲は要旨からは不明

6. 次に読むべき論文は?

- 比較対象である state-of-the-art の diffusion-based bimanual manipulation policy 学習手法(具体的名称は要旨からは不明) - diffusion policy の guided sampling / classifier guidance に関する研究 - vision-language model (VLM) を用いたロボットタスクのスケジューリングや keypoint 指定に関する研究 - RoboTwin ベンチマーク関連の bimanual manipulation 研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haoyuan Deng, Wenkai Guo, Qianzhun Wang, Zhenyu Wu, Ziwei Wang

分類: cs.RO, cs.AI

原文アブストラクト

Bimanual manipulation has been widely applied in household services and manufacturing, which enables the complex task completion with coordination requirements. Recent diffusion-based policy learning approaches have achieved promising performance in modeling action distributions for bimanual manipulation. However, they ignored the physical safety constraints of bimanual manipulation, which leads to the dangerous behaviors with damage to robots and objects. To this end, we propose a test-time trajectory optimization framework named SafeBimanual for any pre-trained diffusion-based bimanual manipulation policies, which imposes the safety constraints on bimanual actions to avoid dangerous robot behaviors with improved success rate. Specifically, we design diverse cost functions for safety constraints in different dual-arm cooperation patterns including avoidance of tearing objects and collision between arms and objects, which optimizes the manipulator trajectories with guided sampling of diffusion denoising process. Moreover, we employ a vision-language model (VLM) to schedule the cost functions by specifying keypoints and corresponding pairwise relationship, so that the optimal safety constraint is dynamically generated in the entire bimanual manipulation process. SafeBimanual demonstrates superiority on 8 simulated tasks in RoboTwin with a 13.7% increase in success rate and a 18.8% reduction in unsafe interactions over state-of-the-art diffusion-based methods. Extensive experiments on 4 real-world tasks further verify its practical value by improving the success rate by 32.5%.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI