RECHERCHE
MMOE : moderniser les Diffusion Transformers avec des experts efficaces
MMOE adapte les principes des MoE de LLM aux modèles de diffusion pour améliorer convergence et qualité.
arXiv cs.AI · cs.LG · cs.CL·Yanhao Jia, Jiepeng Wang, Haibin Huang, Chi Zhang·27 juillet 2026

Image · Source originale
MMOE modernise les architectures Diffusion Transformer en intégrant des experts routés et des mécanismes de résiduel inspirés des LLM. Cette approche équilibre qualité de génération et coûts, surpassant les modèles denses et sparses sur des protocoles d'entraînement identiques.