日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

セグメンテーションarXiv:2505.12547

ProMi: バウンディングボックス注釈を用いた効率的なプロトタイプ混合ベースの少数ショットセグメンテーション

ProMi: An Efficient Prototype-Mixture Baseline for Few-Shot Segmentation with Bounding-Box Annotations

シェア:XThreadsFacebookLINEはてブBluesky

ピクセル単位のラベルではなくバウンディングボックス注釈のみを用い、背景クラスを分布の混合として扱う訓練不要の少数ショット二値セグメンテーション手法ProMiを提案し、実ロボットタスクでの有効性も示した。

詳しい要約

1. どんなもの?

- ロボティクス応用のためのfew-shot binary segmentation手法 - ピクセル単位アノテーションではなくbounding-boxアノテーションのみを用いる - ProMiと名付けたprototype-mixtureベースの手法 - 背景クラスを分布の混合として扱う - シンプルでtraining-free、coarse annotationに容易に対応 - コード公開: https://github.com/ThalesGroup/promi

2. 先行研究と比べてどこがすごい?

- 既存baselineと比較して異なる複数データセットで最良の結果 - 有意な性能向上(gains)を達成 - ピクセルレベルラベルの高コスト・時間負担を回避できる点が利点 - training-freeでcoarse annotationを扱える簡便性 - 具体的な先行研究名や数値は要旨からは不明

3. 技術・手法の肝は?

- prototype-mixtureベースの手法ProMiを提案 - 背景クラスを単一prototypeでなく分布の混合(mixture)としてモデル化 - bounding-boxアノテーションというcoarseな教師信号を活用 - training-freeで動作 - 詳細なアルゴリズムやprototype構成は要旨からは不明

4. どうやって有効だと検証した?

- 異なる複数データセットで既存baselineと比較し最良結果を報告 - 実世界のmobile robotタスクに特化したqualitative実験を実施 - ロボティクス現場での適用可能性を示す - 定量的な評価指標やデータセット名は要旨からは不明

5. 議論はある?

- coarseなbounding-box annotationでfew-shot segmentationが可能であることを示唆 - ロボティクスにおける適応性・実用性への言及 - 限界や失敗ケース、training-freeゆえの制約は要旨からは不明 - 背景を混合分布とする設計の妥当性議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的なbaseline論文名は不明 - few-shot segmentationの定番手法(prototype-based few-shot segmentation、e.g. PANet/FPTrans系)を参照 - bounding-box supervisionを用いるweakly-supervised segmentation関連研究 - prototype-mixtureやdistribution modelingを用いるsegmentation研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Florent Chiaroni, Ali Ayub, Ola Ahmad

分類: cs.CV, cs.AI, cs.LG, cs.RO

原文アブストラクト

In robotics applications, few-shot segmentation is crucial because it allows robots to perform complex tasks with minimal training data, facilitating their adaptation to diverse, real-world environments. However, pixel-level annotations of even small amount of images is highly time-consuming and costly. In this paper, we present a novel few-shot binary segmentation method based on bounding-box annotations instead of pixel-level labels. We introduce, ProMi, an efficient prototype-mixture-based method that treats the background class as a mixture of distributions. Our approach is simple, training-free, and effective, accommodating coarse annotations with ease. Compared to existing baselines, ProMi achieves the best results across different datasets with significant gains, demonstrating its effectiveness. Furthermore, we present qualitative experiments tailored to real-world mobile robot tasks, demonstrating the applicability of our approach in such scenarios. Our code: https://github.com/ThalesGroup/promi.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI