日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ドメイン適応arXiv:2606.21700

VT-DUDA: 視覚トークン条件付けによる拡散誘導型教師なしドメイン適応

VT-DUDA: Visual Token Conditioning for Diffusion-guided Unsupervised Domain Adaptation

シェア:XThreadsFacebookLINEはてブBluesky

拡散モデルを用いた教師なしドメイン適応において、テキストプロンプトだけでなくソース画像の視覚トークンを条件付けに追加し、ターゲットスタイルの合成を改善する手法を提案。

詳しい要約

1. どんなもの?

- どんなもの? - Unsupervised Domain Adaptation (UDA) のための diffusion-guided 手法。 - ラベル付き source とラベルなし target から target 分類器を学習する問題を扱う。 - 従来の diffusion-based UDA は class prompt と domain adaptation module で target 風画像を合成。 - VT-DUDA は source 画像から visual token を作り、text embedding と連結して conditioning を強化。 - 合成は target-domain adapter branch で行い、backbone は変更しない。

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 従来の diffusion-based UDA は class prompt が粗く、domain adaptation module は主に外観を制御するため、target 風合成の指定が不十分だった。 - VT-DUDA は source 画像から instance-level visual context を追加し、text だけでは得られない条件付けを実現。 - 同じ token 列インターフェースで inference 時に token selection と token-strength adjustment が可能。 - 標準 diffusion objective を保ち、既存の adapter-based diffusion framework に backbone 変更なしで統合可能。

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - 各 source 画像を compact な visual token 列に写像。 - その visual token を対応する text embedding と cross-attention context 次元で連結し、hybrid conditioning context を形成。 - latent diffusion model の cross-attention にこの hybrid context を入力。 - 合成は target-domain adapter branch で実行。 - guidance が明示的な token 列なので、token selection と token-strength adjustment による推論時操作が可能。

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - Office-31、Office-Home、VisDA-2017 の 3 データセットで評価。 - 強い discriminative および diffusion-based UDA baseline と比較。 - 平均 target-domain accuracy が向上したと報告。 - 生成ベース UDA において、より強い conditioning interface が合成 target 風データの下流有用性を高めることを示唆。

5. 議論はある?

- 議論はある? - 結果は、生成ベース UDA で conditioning interface を強化すると合成 target 風データの下流有用性が向上することを示唆。 - ただし、visual token の設計や token selection / token-strength adjustment の詳細な効果は要旨からは不明。 - 他の adapter-based diffusion framework への統合容易性は述べられているが、具体的な制約や限界は要旨からは不明。

6. 次に読むべき論文は?

- 次に読むべき論文は? - 要旨で参照/比較されている diffusion-based UDA 手法。 - 同分野の定番として、discriminative UDA の代表手法(例: DANN, ADDA, CDAN など)。 - 生成ベース UDA の関連手法(例: 従来の diffusion-based UDA)。 - ただし、要旨に具体的な論文名の記載はないため、一般名として上記を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xuan Qi, Daniele Berardini, Dario Serez, Vito Paolo Pastore, Vittorio Murino

分類: cs.CV

原文アブストラクト

Unsupervised domain adaptation (UDA) aims to learn a target-domain classifier from labeled source data and unlabeled target data under distribution shift. Recent diffusion-based UDA methods approach this problem by synthesizing labeled target-style images and training on the resulting synthetic data. However, their performance depends heavily on the conditioning design: class prompts provide only coarse guidance, while domain adaptation modules mainly control appearance, which may leave target-style synthesis insufficiently specified. We propose VT-DUDA, a visual-token conditioning framework for diffusion-guided UDA. Instead of relying only on text prompts, VT-DUDA uses source images to provide additional instance-level visual context for target-style synthesis. Specifically, VT-DUDA maps each source image to a compact sequence of visual tokens and forms a hybrid conditioning context by concatenating these tokens with the corresponding text embeddings along the cross-attention context dimension of a latent diffusion model. This provides instance-dependent conditioning beyond text alone, while synthesis is performed with the target-domain adapter branch. Because guidance is represented explicitly as a token sequence, the same interface also permits inference-time manipulation of the conditioning signal through token selection and token-strength adjustment. The proposed method preserves the standard diffusion objective and can be integrated into existing adapter-based diffusion frameworks without modifying the backbone. Across Office-31, Office-Home, and VisDA-2017, VT-DUDA improves average target-domain accuracy over strong discriminative and diffusion-based UDA baselines. The results suggest that, in generation-based UDA, a stronger conditioning interface can improve the downstream usefulness of synthetic target-style data.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3newmoとKDDIが資本業務提携 2028年に堺市で自動運転タクシー商用化目指す提携・買収
  4. 4NVIDIA、CoRLでGR00T 2とIsaac Lab 3.0を発表新製品・発表
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI