RECHERCHE
Ajuster les lois de mise à l'échelle à moindre coût grâce à une sélection active d'expériences
Une méthode séquentielle et consciente de l'incertitude permet d'approcher la précision d'un fitting complet en n'utilisant que 10 % du budget.
arXiv cs.AI · cs.LG · cs.CL·Sijie Li, Shanda Li, Haowei Lin, Weiwei Sun·24 avril 2026
Image · Source originale
Ajuster les scaling laws peut coûter des millions avant même le lancement d'un entraînement. Les auteurs reformulent ce problème en une conception expérimentale séquentielle contrainte par un budget, et proposent une méthode qui sélectionne activement les expériences pilotes les plus informatives pour la région cible. Sur un benchmark diversifié de tâches de scaling law, l'approche rivalise avec le fitting sur l'ensemble complet tout en ne consommant qu'environ 10 % du budget total.
Chaleur 0
Pertinence 72
Nouveauté 68