arXiv News

すべての人に一次情報を

サイト

Aboutプライバシーポリシー利用規約

© 2026 arXiv News

arXiv News

英語日本語

言語を切り替え

英語日本語
アカウントを読み込み中…

すべての人に一次情報を

トップページに戻る
機械学習日本語公開済み

逆転なしの画像編集で本人性を保ちつつ属性変更可能に

2026年11月11日arXiv: 2611.12815v1

研究者らは、事前学習済みのニューラルネットワークを使って画像属性を変更する2つの手法を比較しました。

従来の方法では、ノイズ画像を用いて「裏側状態」を復元し、その状態を編集したあと再構築するステップに依存していました。対照的に、今回提案した逆転なしパイプラインは、画像を直接運搬します。具体的には、属性値から生成されるオフセットをバックボーンで読める形に変換し、流れモデルが生成する速度場の差分を積分して画像を変化させます。この過程では、潜在状態を復元する操作や内部最適化は不要です。

図1:逆転有りと逆転無しの2つの画像輸送を並べて示す図。左側はノイズ化と再構築を経る逆転法、右側は速度場差分で直接画像を変換する逆転―free法を示す。
Fig. 1. 逆転なしパイプラインの二つの輸送手段。左パネルは逆転(inversion)を用い、事実画像をノイズへ変換しターゲットで再構築する。一方右パネルは逆転‑free 輸送で、事実画像を積分された速度差分に沿って直接移動させ、画像マニフォールド上に留まる。Vishnubhatla, Saketh, Ma, Pingchuan, Wan, Shu, Beigi, Alimohammad, Harrison, Andre, Raglin, Adrienne et al. · arXiv:2611.12815v1 · Fig. 1: · CC BY 4.0

結果は、CelebA データセットで確認されました。SD3‑inv と FlowEdit(逆転あり)のF1スコアは、4つの属性のうち3つで高く、効果はより大きい一方、LPIPS スコアは高いままです。LPIPS は画像間の知覚的距離を示す指標であり、値が低いほど本人性が保たれていることを意味します。逆転なしの FlowEdit は、同じ4属性すべてで LPIPS が 0.055 から 0.049 の範囲に収まり、逆転あり手法よりも顕著に低い値を示しました。これは、逆転段階で生じる離散化誤差が長期的に蓄積し、画像の原型から遠ざかるためと考えられます。

テーブル2:複数の手法(VAE、HVAE、GAN、Causal‑Adapter、SD3‑inv、FlowEdit)の効果、リアリズム、および本人性指標(LPIPS)を対比した表。explicit inversion手法は高いF1、低いLPIPSではないが、逆転‑free FlowEditは低いLPIPS値を示す。
Effectiveness F1 ↑Realism FID ↓Identity LPIPS ↓
MethodBackboneagb​rb​lagb​rb​lagb​rb​l
Explicit inversion — encoder; DDIM for Causal-Adapter, flow-ODE for SD3-inv
VAEdeep-SCM0.3900.9900.2840.00460.063.459.957.40.2830.2950.2830.284†
HVAEdeep-SCM0.2460.7420.4760.1222.25.925.631.70.026†0.0760.1380.229†
GANdeep-SCM0.4710.9890.2730.34022.126.623.024.30.2560.3630.2620.285
Causal-AdapterSD1.5 + adapter0.5300.9970.4240.4978.29.08.017.70.1660.2460.1190.240
SD3-invSD3 (2B, frozen)0.8560.9370.5220.40533.147.033.137.40.3690.4640.3510.397
Inversion Free
FlowEditSD3 (2B, frozen)0.8660.9270.2150.03910.89.63.93.50.0780.1240.0550.049†
TABLE II. テーブル II:CelebAにおける効果(F1)、リアリズム(FID)、本人性(LPIPS)の比較。explicit inversion(SD3‑inv、FlowEdit)では3/4属性で高いF1を達成するがLPIPSは高い。一方逆転‑free FlowEditは全属性でLPIPSが低く、本人性保持が優れている。Vishnubhatla, Saketh, Ma, Pingchuan, Wan, Shu, Beigi, Alimohammad, Harrison, Andre, Raglin, Adrienne et al. · arXiv:2611.12815v1 · TABLE II: · CC BY 4.0

逆転なしパイプラインは、潜在状態を再構築しないために誤差の蓄積源を排除し、画像が訓練マニフォールド上に留まることを保証します。今後は医療画像など、鑑賞者の本人性が重要な領域での応用が期待されます。

元論文

Inversion-Free High-Dimensional Counterfactual Inference

機械学習
arXiv で見る
逆転なしの画像編集で本人性を保ちつつ属性変更可能に | arXiv News