日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

画像編集arXiv:2606.18906

BindEdit: 注意漏れを抑えた高精度な複数物体画像編集

BindEdit: Taming Attention Leakage for Precise Multi-Object Image Editing

シェア:XThreadsFacebookLINEはてブBluesky

複数物体を含む画像編集で生じる注意漏れ(トークンと領域の対応ずれや、編集対象外の物体の注意が支配的になる問題)を特定し、拡散過程内で注意制約を課すことで、物体の混ざりや重複を防ぎ、高精度な編集を実現する手法を提案した。

詳しい要約

1. どんなもの?

- 実画像編集において複数オブジェクトを精密に編集する手法。 - 既存手法は複雑なマルチオブジェクト場面で意味の混ざり、オブジェクト重複、不完全な編集を引き起こす。 - 原因を attention leakage と特定し、Edit-Token Leakage と Source Dominance Leakage の2種類に分類。 - これらを抑制する BindEdit を提案。 - 単一拡散軌跡内で attention 制約を課す。 - マルチオブジェクトベンチマークも提案。

2. 先行研究と比べてどこがすごい?

- 既存手法は複数オブジェクト編集で semantic blending や object duplication が発生。 - 原因である attention leakage を明示的に特定し、2種類に分類した点が新しい。 - 単一 diffusion trajectory 内で attention-level 制約を課すことで、既存手法より一貫して優れる。 - 単一・複数オブジェクト編集の両方で堅牢な性能を維持。 - 包括的なマルチオブジェクトベンチマークを提案。

3. 技術・手法の肝は?

- 単一 diffusion trajectory 内で attention-level 制約を強制。 - Edit-Token Leakage 抑制のため、cross-attention と self-attention を jointly regularize。 - 各 target token group を対応する spatial region に束縛。 - instance-level separation を維持。 - Source Dominance Leakage 抑制のため、cross-attention re-balancing mechanism を導入。 - target token の影響を増幅。 - editable regions 内の residual source semantics を減衰。 - region fidelity term により、各 target concept が editing mask 全体で一貫して表現されるようにする。

4. どうやって有効だと検証した?

- 包括的なマルチオブジェクトベンチマークを提案し、多様なオブジェクト数とカテゴリを網羅。 - 広範な実験により、BindEdit が既存手法を単一 diffusion trajectory 内で一貫して上回ることを示す。 - 単一オブジェクト編集とマルチオブジェクト編集の両シナリオで堅牢な性能を維持することを確認。

5. 議論はある?

- 要旨からは不明。 - 限界や失敗事例、計算コスト、ユーザスタディなどに関する議論は要旨に記載なし。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、attention 制御を用いた diffusion-based image editing(例: Prompt-to-Prompt, Null-text Inversion, InstructPix2Pix など)や、マルチオブジェクト編集のベンチマーク(例: Multi-Object Editing Benchmark)が挙げられる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chaewon Park, Soyoon Lee, Naeun Lee, Minjung Shin, Seogkyu Jeon, Kibeom Hong

分類: cs.CV

原文アブストラクト

Real image editing enables precise manipulation of visual content, yet existing methods often fail in complex multi-object scenarios, causing semantic blending, object duplication, or incomplete edits. We attribute these failures to attention leakage, where signals across spatial regions and text tokens become entangled during the denoising process. Specifically, we identify two distinct forms of leakage: Edit-Token Leakage, where ambiguous token-region alignment leads to object blending, and Source Dominance Leakage, where tokens of unchanged source objects overwhelm the attention intended for target entities. To resolve these leakages, we propose \textbf{BindEdit}, which enforces attention-level constraints within a single diffusion trajectory. To suppress Edit-Token Leakage, BindEdit jointly regularizes cross- and self-attention so that each target token group is bound to its corresponding spatial region while maintaining instance-level separation. To suppress Source Dominance Leakage, a cross-attention re-balancing mechanism amplifies target token influence and attenuates residual source semantics within editable regions. Moreover, a region fidelity term ensures that each target concept is expressed coherently across the entire editing mask. Additionally, we propose a comprehensive multi-object benchmark encompassing diverse object counts and categories. Extensive experiments demonstrate that BindEdit consistently outperforms existing methods within a single diffusion trajectory, maintaining robust performance across both single- and multi-object editing scenarios.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI