RECHERCHE
Formules d'interpolation par noyau de chemin du second ordre en apprentissage automatique
Des chercheurs étendent la formule d'interpolation de Domingos (2020) en introduisant des termes du second ordre liés à la courbure et au bruit des mini-batchs.
arXiv cs.AI · cs.LG · cs.CL·Jin Guo, Roy Y. He, Jean-Michel Morel·5 juin 2026
Image · Source originale
La formule d'interpolation de Domingos (2020) exprime les prédictions d'un réseau de neurones comme une intégrale le long du chemin d'optimisation. Ce papier développe des extensions du second ordre, faisant apparaître un terme de courbure pondérée et, pour la SGD stochastique, un composant lié à la covariance du bruit de gradient. L'extension à la SGD avec momentum est également traitée, avec une estimation de concentration sur la prédiction finale.
Chaleur 2
Pertinence 45
Nouveauté 68