Les régimes de fine-tuning définissent des problèmes distincts en apprentissage continu

Une étude arXiv montre que le régime de fine-tuning — défini par le sous-espace de paramètres entraînables — constitue une variable d'évaluation à part entière en apprentissage continu. Les auteurs testent quatre méthodes classiques (EWC, LwF, SI, GEM) sur cinq profondeurs d'adaptation et cinq datasets. Résultat : le classement relatif des méthodes n'est pas stable d'un régime à l'autre, remettant en cause la comparabilité des benchmarks existants.