日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2505.11879

深層学習を用いた3自由度デルタロボットによるカスタムケータリングパッケージの自動組立に関する実験的研究

Experimental Study on Automatically Assembling Custom Catering Packages With a 3-DOF Delta Robot Using Deep Learning Methods

シェア:XThreadsFacebookLINEはてブBluesky

3自由度デルタロボットと2本指グリッパを用いて、深層学習(YOLOv5とFastSAM)で物体を検出・セグメンテーションし、把持点を計算してケータリングパッケージを自動梱包するシステムを開発し、80%以上の把持成功率を達成した。

詳しい要約

1. どんなもの?

- 3-DOF Delta parallel robot に two-fingered gripper を装着し、catering package を自動で詰める実験研究 - deep learning を用いた物体検出・segmentation・把持点計算を統合 - Persian-manufactured products に焦点を当てた初の 1,500 枚画像の custom dataset を構築 - 検出から把持までを real-time で行い、完全自律的な packing process を目指す

2. 先行研究と比べてどこがすごい?

- 従来の catering package 自動化に対し deep learning を適用した点が特徴 - Persian-manufactured products を対象とした初の dataset を構築したと主張 - YOLOV5 と FastSAM を組み合わせ、segmentation mask から回転角と把持点を算出 - eigenvector を用いた新規 geometrical approach で 2 つの grasp points を決定 - 実機実験で 80% 超の自動把持成功率を報告

3. 技術・手法の肝は?

- YOLOV5 で対象物体を検出 - FastSAM で segmentation を実施 - segmentation mask から rotation angle を計算し、物体を囲む rotated rectangle を生成 - その rectangle に対し eigenvector を用いる新規 geometrical approach で 2 つの grasp points を算出 - 得られた情報を 3-DOF Delta parallel robot に送り、calibration と packing を実行

4. どうやって有効だと検証した?

- 1,500 枚の custom dataset を用いてモデルを構築 - extensive experimental study により提案モデルを検証 - 3-DOF Delta parallel robot への情報伝達を含む fully autonomous packing process を実機で実施 - 自動把持において 80% 超の success rate を達成したと報告

5. 議論はある?

- 80% 超の成功率は実用的自動化への前進と位置づけられている - 失敗事例や誤把持の要因、限界については要旨からは不明 - dataset の規模や多様性、他製品への汎化性に関する議論は要旨からは不明 - real-time 性の定量的評価や処理時間の詳細は要旨からは不明

6. 次に読むべき論文は?

- YOLOV5 に関する原論文 - FastSAM に関する原論文 - Delta parallel robot を用いた packing/grasping の関連研究 - segmentation mask と eigenvector を用いた grasp point 決定の関連手法 - Persian-manufactured products の物体検出 dataset に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Reihaneh Yourdkhani, Arash Tavoosian, Navid Asadi Khomami, Mehdi Tale Masouleh

分類: cs.RO, cs.CV

原文アブストラクト

This paper introduces a pioneering experimental study on the automated packing of a catering package using a two-fingered gripper affixed to a 3-degree-of-freedom Delta parallel robot. A distinctive contribution lies in the application of a deep learning approach to tackle this challenge. A custom dataset, comprising 1,500 images, is meticulously curated for this endeavor, representing a noteworthy initiative as the first dataset focusing on Persian-manufactured products. The study employs the YOLOV5 model for object detection, followed by segmentation using the FastSAM model. Subsequently, rotation angle calculation is facilitated with segmentation masks, and a rotated rectangle encapsulating the object is generated. This rectangle forms the basis for calculating two grasp points using a novel geometrical approach involving eigenvectors. An extensive experimental study validates the proposed model, where all pertinent information is seamlessly transmitted to the 3-DOF Delta parallel robot. The proposed algorithm ensures real-time detection, calibration, and the fully autonomous packing process of a catering package, boasting an impressive over 80\% success rate in automatic grasping. This study marks a significant stride in advancing the capabilities of robotic systems for practical applications in packaging automation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI