日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

視覚/分解arXiv:2604.17231

フリンジ投影に基づく自律型ハードディスク分解のための視覚パイプライン

Fringe Projection Based Vision Pipeline for Autonomous Hard Drive Disassembly

シェア:XThreadsFacebookLINEはてブBluesky

ハードディスクドライブの自律分解のために、フリンジ投影プロフィロメトリと深度補完、インスタンスセグメンテーションを統合した視覚パイプラインを提案し、高精度な部品位置特定と高速処理を実現した。

詳しい要約

1. どんなもの?

- HDDの自律分解のための視覚パイプラインを提案。 - Fringe Projection Profilometry (FPP) モジュールで3Dセンシング。 - FPPが失敗する場合にdepth completionモジュールを選択的に起動。 - 軽量リアルタイムinstance segmentationネットワークを統合し、シーン理解と重要部品の位置推定を実現。 - 同じFPPカメラ・プロジェクタシステムを深度センシングと部品位置推定に使用し、深度マップとセグメンテーションマスクがピクセル単位で位置合わせされる。 - 下流のロボット分解に有用な高忠実度の意味・空間データを提供。

2. 先行研究と比べてどこがすごい?

- 従来手法は断片的で、堅牢な3Dセンシングとファスナー位置推定が欠如。 - 一般的なRGB-D知覚システムと異なり、FPPシステムを深度と部品位置推定に共用することで、位置合わせ不要でピクセル単位の整合を実現。 - 学習したdepth completionとinstance segmentationネットワークを展開指向の推論に最適化。 - 具体的な先行研究名は要旨からは不明。

3. 技術・手法の肝は?

- Fringe Projection Profilometry (FPP) モジュールによる3Dセンシング。 - FPPが失敗する場合にdepth completionモジュールを選択的にトリガー。 - 軽量リアルタイムinstance segmentationネットワークを統合。 - 同じFPPカメラ・プロジェクタシステムを深度センシングと部品位置推定に共用。 - 学習したdepth completionとinstance segmentationネットワークを展開指向の推論に最適化。 - sim-to-real転移学習アプローチを採用し、物理データセットを拡張。

4. どうやって有効だと検証した?

- instance segmentation: box mAP@50 0.960、mask mAP@50 0.957。 - depth completion: Depth Anything V2 BaseバックボーンでRMSE 2.317 mm、MAE 1.836 mm。 - Platter Facing学習推論スタック: 評価ワークステーションで合計レイテンシ12.86 ms、スループット77.7 FPS。 - sim-to-real転移学習により物理データセットを拡張。

5. 議論はある?

- 提案パイプラインは高忠実度の意味・空間データを提供し、下流のロボット分解に有用。 - HDD instance segmentation用に開発した合成データセットを公開予定。 - 具体的な議論や限界は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 具体的な論文名は不明。 - 関連手法: Fringe Projection Profilometry (FPP)、Depth Anything V2 Base、sim-to-real転移学習、instance segmentation。 - 同分野の定番: ロボット分解、e-wasteリサイクル、3Dセンシング、RGB-D知覚。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Badrinath Balasubramaniam, Vignesh Suresh, Benjamin Metcalf, Beiwen Li

分類: cs.CV, cs.RO

原文アブストラクト

Unrecovered e-waste represents a significant economic loss. Hard disk drives (HDDs) comprise a valuable e-waste stream necessitating robotic disassembly. Automating the disassembly of HDDs requires holistic 3D sensing, scene understanding, and fastener localization, however current methods are fragmented, lack robust 3D sensing, and lack fastener localization. We propose an autonomous vision pipeline which performs 3D sensing using a Fringe Projection Profilometry (FPP) module, with selective triggering of a depth completion module where FPP fails, and integrates this module with a lightweight, real-time instance segmentation network for scene understanding and critical component localization. By utilizing the same FPP camera-projector system for both our depth sensing and component localization modules, our depth maps and derived 3D geometry are inherently pixel-wise aligned with the segmentation masks without registration, providing an advantage over RGB-D perception systems common in industrial sensing. We optimize both our trained depth completion and instance segmentation networks for deployment-oriented inference. The proposed system achieves a box mAP@50 of 0.960 and mask mAP@50 of 0.957 for instance segmentation, while the selected depth completion configuration with the Depth Anything V2 Base backbone achieves an RMSE of 2.317 mm and MAE of 1.836 mm; the Platter Facing learned inference stack achieved a combined latency of 12.86 ms and a throughput of 77.7 Frames Per Second (FPS) on the evaluation workstation. Finally, we adopt a sim-to-real transfer learning approach to augment our physical dataset. The proposed perception pipeline provides both high-fidelity semantic and spatial data which can be valuable for downstream robotic disassembly. The synthetic dataset developed for HDD instance segmentation will be made publicly available.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI