Modèles génératifs : le lien entre spéciation sémantique et rupture du débruitage local
Une étude théorique montre que la fenêtre de non-localité, où le contexte local devient insuffisant, s'inscrit dans la fenêtre de spéciation sémantique.
arXiv cs.AI · cs.LG · cs.CL·Guangkuo Liu, Mert Okyay, Yifan F. Zhang, Fangjun Hu·29 septembre 2026

Image · Source originale
Les auteurs analysent deux phénomènes temporels des modèles génératifs : la spéciation, où un échantillon se fixe sur une classe sémantique, et la non-localité, où le contexte local ne suffit plus. Sous une hypothèse de « cause commune », ils démontrent que la fenêtre de non-localité est contenue dans celle de spéciation, et identifient des conditions de transition de phase vérifiées sur des mélanges gaussiens.