日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

変形物体操作arXiv:2610.34147

物体特性と空間認識を考慮した変形可能な線状物体の操作ポリシー

PS-DLO: Property- and Spatially Aware Deformable Linear Object Manipulation Policy

シェア:XThreadsFacebookLINEはてブBluesky

物体の物理的特性を画像テキスト学習で推定し、将来の観測から得た空間情報を方策に蒸留することで、単腕・双腕ロボットによる線状物体の多タスク操作の成功率と視覚変化への頑健性を向上させた研究。

詳しい要約

1. どんなもの?

- Deformable linear object (DLO) を操作するための manipulation policy「PS-DLO」の提案 - 物体の物理的性質(property)と空間情報(spatial)の両方を考慮する枠組み - 単腕・双腕プラットフォームの両方に対応 - 9つの実世界タスクで評価される multi-task policy

2. 先行研究と比べてどこがすごい?

- DLO は細長い形状のため正確な localization が難しく、変形が物体固有の物理的性質に依存するという coupled perception and control の課題がある - 先行研究との具体的な比較は要旨からは不明 - 提案手法は最強の baseline を 20.0 percentage points 上回る平均成功率 68.9% を達成 - 視覚変化(visual-shift)条件下でも 7条件中6条件で baseline を上回る

3. 技術・手法の肝は?

- 第一に contrastive image-text learning により初期観測を DLO の性質のカテゴリ記述にマッピングし、物理・構造の事前分布(prior)を action 生成に与える - 第二に SAM3 が将来観測から mask-guided features を抽出し、これを policy の action expert に distill する - これによりタスクに関連する DLO 領域とその後の configuration を符号化する - 各 embodiment ごとに共有の multi-task policy を学習

4. どうやって有効だと検証した?

- 単腕・双腕プラットフォームにわたる9つの実世界タスクで評価 - 各 embodiment につき共有 multi-task policy を訓練 - 平均成功率 68.9% を達成し、最強 baseline を 20.0 percentage points 上回る - butterfly-knot untying における generalization 実験で、7つの visual-shift 条件中6つで baseline より高い成功率

5. 議論はある?

- 物体性質の prior と将来の空間 supervision の組み合わせが multi-task DLO 操作と視覚変化への頑健性を改善することを示唆 - 具体的な限界や失敗要因、議論の詳細は要旨からは不明 - 視覚変化条件のうち1条件では baseline を上回らなかった点は要旨からは詳細不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な先行研究は明記されていない - 関連手法として contrastive image-text learning、SAM3、action expert を用いた policy learning の文献が候補 - 同分野の定番として deformable linear object manipulation、multi-task imitation learning、visual representation distillation に関する研究を挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mengdi Li, Boxian Yao, Xiyu Zhu, Yifan Yang, Yunfan Lou, Xuan Han, Tao Liu, Zhibo Pang

分類: cs.RO

原文アブストラクト

Deformable linear objects (DLO) pose a coupled perception and control challenge: their slender geometry makes precise localization difficult, while their deformations depend on object-specific physical properties. To address this challenge, we propose PS-DLO, a property- and spatially aware DLO manipulation policy. First, contrastive image-text learning maps the initial observation to categorical descriptions of DLO properties, providing explicit physical and structural priors for action generation. Second, SAM3 extracts mask-guided features from future observations, which are distilled into the policy's action expert to encode task-relevant DLO regions and their subsequent configurations. We evaluate PS-DLO on nine real-world tasks across single-arm and bimanual platforms, training a shared multi-task policy for each embodiment. PS-DLO achieves an average success rate of 68.9%, exceeding the strongest baseline by 20.0 percentage points. In generalization experiments, PS-DLO achieves higher success rates than the baseline in six of seven visual-shift conditions on butterfly-knot untying. These results demonstrate that combining object-property priors with future spatial supervision improves multi-task DLO manipulation and robustness to visual variation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI