日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

セグメンテーションarXiv:2605.24532

画像条件付きインスタンスプロンプトネットワークによる参照リモートセンシング画像セグメンテーション

Image-Conditioned Instance Prompt Network for Referring Remote Sensing Image Segmentation

シェア:XThreadsFacebookLINEはてブBluesky

リモートセンシング画像の参照セグメンテーションにおいて、画像条件付きインスタンスプロンプトと双方向情報融合を導入し、クロスモーダル特徴融合のボトルネックを解消する新しいネットワークを提案した。

詳しい要約

1. どんなもの?

- どんなもの? - Referring Remote Sensing Image Segmentation (RRSIS) のための新しいモデル ICIPNet を提案。 - RRSIS は、視覚-空間特徴と言語意図を整合させ、精密なターゲット知覚を必要とする embodied perception に関連するクロスモーダルタスク。 - ICIPNet は Bilateral Information Fusion を備え、クロスモーダル特徴融合のボトルネックを緩和することを目的とする。

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 既存の RRSIS モデルを上回る性能を実験で示した。 - 従来研究はテキスト特徴の粒度向上や画像-テキスト融合の最適化に焦点を当てていたが、記述粒度の不足や意味変化への感度が融合のボトルネックとなっていた。 - ICIPNet は外部知識なしで自己適応的な視覚・意味表現を生成し、トークンとチャネル次元で融合を強化する点が新しい。

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - Image-Conditioned Instance Prompt (ICIP) モジュール:外部知識を使わずに自己適応的な視覚・意味表現を生成。 - Bilateral Information Fusion (BIF) モジュール:トークン次元とチャネル次元に沿って特徴融合を強化。 - これらによりクロスモーダル特徴融合のボトルネックを緩和。

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - 実験により、提案する ICIPNet が既存の RRSIS モデルを上回ることを示した。 - 具体的なデータセットや評価指標は要旨からは不明。

5. 議論はある?

- 議論はある? - 要旨からは不明。

6. 次に読むべき論文は?

- 次に読むべき論文は? - 要旨で参照/比較されている研究は明示されていない。 - 同分野の関連手法として、RRSIS の既存モデルやクロスモーダル特徴融合に関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Biaoyu Ren, Qingsheng Wang, Cun Xu, Dingkang Yang, Wenxuan Wang

分類: cs.CV

原文アブストラクト

Referring Remote Sensing Image Segmentation (RRSIS) is a situated, task-driven cross-modal task related to the embodied perception paradigm, requiring models to align visual-spatial features with linguistic intentions for precise target perception. Recent research has focused on refining the granularity of textual features and optimizing image-text feature fusion to better guide target feature representations. However, insufficient descriptive granularity and sensitivity to semantic shifts can cause bottlenecks in cross-modal feature fusion. To address these issues, we propose the Image-Conditioned Instance Prompt Network (ICIPNet) with Bilateral Information Fusion, which is designed to alleviate bottlenecks in cross-modal feature fusion. ICIPNet introduces an Image-Conditioned Instance Prompt (ICIP) module to generate self-adaptive visual and semantic representations without external knowledge. The Bilateral Information Fusion (BIF) module enhances feature fusion along the token and channel dimensions. Experiments demonstrate that the proposed ICIPNet outperforms existing RRSIS models.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI