日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

変形物体知覚arXiv:2512.17764

UniStateDLO: 遮蔽下の変形可能な線状物体に対する統合的な生成的状态推定と追従

UniStateDLO: Unified Generative State Estimation and Tracking of Deformable Linear Objects Under Occlusion for Constrained Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ケーブルやロープなどの変形線状物体(DLO)の知覚を、拡散モデルを用いた条件付き生成問題として定式化し、部分点群からの単一フレーム状態推定とフレーム間追従を統合的に実現。合成データのみで訓練し、遮蔽下でのゼロショットsim-to-realを達成した。

詳しい要約

1. どんなもの?

- 変形可能な線状物体(DLO)の知覚パイプライン - ケーブル、ロープ、ワイヤなどが対象 - 単一フレームの状態推定とフレーム間の状態追跡を統合 - 部分点群から高次元のDLO状態を推定 - 深刻なオクルージョン下でもロバストに動作 - 制約された操作環境での利用を想定

2. 先行研究と比べてどこがすごい?

- 従来の視覚ベース手法はオクルージョンに脆弱 - 制約環境での障害物、大きな変形、限られた視点が問題 - 状態空間の高次元性、特徴不足、センサノイズも課題 - UniStateDLOはこれらを克服する初の完全なDLO知覚パイプライン - オクルージョン下で最先端ベースラインを上回る性能 - 合成データのみで訓練し、ゼロショットで実世界に汎化

3. 技術・手法の肝は?

- 条件付き生成問題として定式化 - 拡散モデル(diffusion models)を活用 - 部分的な観測から高次元DLO状態への複雑なマッピングを学習 - 初期オクルージョン、自己オクルージョン、複数物体によるオクルージョンに対応 - 大規模合成データセットのみで訓練 - リアルタイムで大域的に滑らかかつ局所的に正確な予測を生成

4. どうやって有効だと検証した?

- シミュレーションと実世界実験を実施 - 推定と追跡の両タスクで最先端ベースラインと比較 - 大規模なオクルージョン下でも優位性を確認 - 閉ループDLO操作システムのフロントエンドモジュールとして統合 - 複雑で制約された3D環境での安定したフィードバック制御を実証

5. 議論はある?

- 要旨からは不明 - 限界や失敗事例、計算コスト、一般化可能性の議論は明記されていない

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明記されていない - 関連手法として拡散モデル(diffusion models) - 同分野の定番としてDLOの視覚ベース知覚手法(vision-based methods) - 点群処理(point cloud processing) - シミュレーションから実世界への転移(sim-to-real transfer)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kangchen Lv, Mingrui Yu, Shihefeng Wang, Xiangyang Ji, Xiang Li

分類: cs.RO

原文アブストラクト

Perception of deformable linear objects (DLOs), such as cables, ropes, and wires, is the cornerstone for successful downstream manipulation. Although vision-based methods have been extensively explored, they remain highly vulnerable to occlusions that commonly arise in constrained manipulation environments due to surrounding obstacles, large and varying deformations, and limited viewpoints. Moreover, the high dimensionality of the state space, the lack of distinctive visual features, and the presence of sensor noises further compound the challenges of reliable DLO perception. To address these open issues, this paper presents UniStateDLO, the first complete DLO perception pipeline with deep-learning methods that achieves robust performance under severe occlusion, covering both single-frame state estimation and cross-frame state tracking from partial point clouds. Both tasks are formulated as conditional generative problems, leveraging the strong capability of diffusion models to capture the complex mapping between highly partial observations and high-dimensional DLO states. UniStateDLO effectively handles a wide range of occlusion patterns, including initial occlusion, self-occlusion, and occlusion caused by multiple objects. In addition, it exhibits strong data efficiency as the entire network is trained solely on a large-scale synthetic dataset, enabling zero-shot sim-to-real generalization without any real-world training data. Comprehensive simulation and real-world experiments demonstrate that UniStateDLO outperforms all state-of-the-art baselines in both estimation and tracking, producing globally smooth yet locally precise DLO state predictions in real time, even under substantial occlusions. Its integration as the front-end module in a closed-loop DLO manipulation system further demonstrates its ability to support stable feedback control in complex, constrained 3-D environments.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI