RECHERCHE
Recherche d'architectures neuronales frugale : essaims et Transformer pour du NAS accessible
Un cadre hybride combinant Transformer et Artificial Bee Colony permet de faire du NAS sur GPU grand public, en quelques heures seulement.
arXiv cs.AI · cs.LG · cs.CL·Romain Amigon·13 juillet 2026
Image · Source originale
Les auteurs proposent un framework de Neural Architecture Search combinant un contrôleur Transformer autoregressif entraîné par RL avec un algorithme d'essaim (Artificial Bee Colony) pour l'exploitation locale. Un mécanisme d'entropie dynamique évite la convergence prématurée. Sur GPU RTX 3060, la méthode découvre en 3 heures une architecture à 174 000 paramètres atteignant 84,85% sur CIFAR-10, bien plus compacte que ResNet-20, et s'applique aussi à la détection de fraude sur données tabulaires déséquilibrées.
Chaleur 3
Pertinence 45
Nouveauté 55