日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

画像編集arXiv:2606.31278

あらゆるものを一度に編集する

Editing Everything Everywhere All at Once

シェア:XThreadsFacebookLINEはてブBluesky

複数の画像編集指示を1回の推論で処理する新しい手法MICEを提案し、指示間の干渉を抑えて属性の混入を防ぎつつ、高品質な編集を実現した。

詳しい要約

1. どんなもの?

- 画像の複数要素を1回のforward passで同時編集する手法 - 名称はMICE (Multi-Instance Concurrent Editing) - Multimodal Diffusion Transformersを対象としたtraining-free戦略 - ユーザ提供のsegmentation masksで編集対象領域を指定 - 複数インスタンス編集の効率と調和を狙う

2. 先行研究と比べてどこがすごい?

- 従来のmulti-turn image manipulationより効率的で調和が良い可能性 - 複数指示が異なる領域を狙うとsemantic interferenceが生じ、attribute leakageや編集のdisentanglement悪化が課題 - MICEはtraining-freeでscalableなmulti-instance editingを実現 - 既存のstrong baselinesやrecent competitorsをvisual quality preservationとediting instructionsへのfaithfulnessで上回る

3. 技術・手法の肝は?

- Multimodal Diffusion Transformersのjoint attentionのadditive biasを変更 - instance-specific edit instructions、latent、context tokens間の相互作用を制御 - ユーザ提供のsegmentation masksでトークンを同定 - intra-instance attentionを許可 - 隣接領域トークン間の相互作用にペナルティ - 無関係なcross-instance attentionを抑制 - これによりattribute bindingを強制しつつglobal visual consistencyを保持

4. どうやって有効だと検証した?

- LoMOE-Benchで評価 - 新たにMICE-Benchを導入 - MICE-Benchは1画像あたり平均8.5の同時編集を含むより挑戦的なベンチマーク - 実験でvisual quality preservationとediting instructionsへのfaithfulnessにおいてstrong baselinesやrecent competitorsを上回る

5. 議論はある?

- 複数編集の増加に伴うsemantic interference、attribute leakage、edit disentanglementの悪化が動機 - MICEはtraining-freeでscalableだが、具体的な限界や失敗ケースは要旨からは不明 - 計算コストやリアルタイム性、他の生成モデルへの汎化性は要旨からは不明

6. 次に読むべき論文は?

- LoMOE-Bench - MICE-Bench - Multimodal Diffusion Transformers - multi-turn image manipulation - joint attention - 同分野の定番としてDiffusion Models、Attention Control、Image Editing

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fabio Quattrini, Carmine Zaccagnino, Enis Simsar, Marta Tintoré Gazulla, Rita Cucchiara, Alessio Tonioni, Silvia Cascianelli

分類: cs.CV

原文アブストラクト

Editing multiple elements of an image in a single forward pass is a practical alternative to multi-turn image manipulation, offering improved efficiency and potentially better harmonization. However, when several instructions target different regions, semantic interference often leads to attribute leakage and poor edit disentanglement, especially as the number of edits increases. In this work, we propose MICE (Multi-Instance Concurrent Editing), a training-free strategy for scalable multi-instance image editing with Multimodal Diffusion Transformers. MICE modifies the additive bias of joint attention to regulate interactions between instance-specific edit instructions, latent, and context tokens identified via user-provided segmentation masks. Specifically, MICE allows intra-instance attention, penalizes interactions between neighboring region tokens, and suppresses unrelated cross-instance attention. As a result, our method enforces attribute binding while preserving global visual consistency. We evaluate MICE on LoMOE-Bench and introduce MICE-Bench, a more challenging benchmark with an average of 8.5 concurrent edits per image. The experiments demonstrate that our approach outperforms strong baselines and recent competitors in terms of visual quality preservation and faithfulness to the editing instructions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

MINISFORUM(ミニPC)

MINISFORUM(ミニPC)の公式広告バナーMINISFORUM公式ストアを見る ↗
PR本紙発行元 EmplifAI