Diffusibilité des latents en haute dimension : impact sur la génération par flow matching

Les Representation Autoencoders (RAEs) permettent d'appliquer la diffusion dans l'espace de caractéristiques d'encodeurs visuels pré-entraînés. Cependant, le fine-tuning de ces encodeurs pour améliorer la reconstruction réduit la dimensionnalité effective de la représentation. Dans ce contexte, la prédiction de vélocité standard du flow matching s'avère inefficace car elle ajuste des directions de bruit orthogonales hors de la variété du signal. L'utilisation de la paramétrisation en données propres (x₀-prediction), qui concentre l'apprentissage sur la variété sous-jacente, améliore systématiquement les performances de génération text-to-image.