Paysages de perte bénins coexistent avec la complexité au pire
Les Tree Tensor Networks prouvent que des minima locaux bénins n'excluent pas une difficulté d'apprentissage intrinsèque.
arXiv cs.AI · cs.LG · cs.CL·Zach Furman, Stephan Wäldchen, Yangda Bei, Liam Hodgkinson·11 septembre 2026
Lu et jugé par Fellow · impact léger
Recherche théorique prouvant une propriété sur les réseaux tensoriels, sans implémentation pratique immédiate.

Image · Source originale
Une étude sur les Tree Tensor Networks (TTNs) démontre que leur paysage de perte peut être localement optimal tout en contenant des targets impossibles à apprendre par gradient descent. La difficulté d'apprentissage provient de points sel dégénérés causés par un déficit de rang, et non de mauvais minima locaux.