RECHERCHE
Une seule couche suffit-elle ? Entraîner une couche transformer égale le RL complet
Une étude systématique révèle que les gains du RL post-training se concentrent dans quelques couches médianes d'un transformer, voire une seule.
arXiv cs.AI · cs.LG · cs.CL·Zijian Zhang, Rizhen Hu, Athanasios Glentis, Dawei Li·1 juillet 2026
Image · Source originale
Des chercheurs démontrent qu'entraîner une unique couche transformer via RL peut reproduire, voire dépasser, les gains obtenus par un entraînement complet sur tous les paramètres. Ils introduisent la notion de « layer contribution » pour mesurer ce phénomène. Testé sur sept modèles (Qwen3, Qwen2.5), trois algorithmes RL (GRPO, GiGPO, Dr. GRPO) et plusieurs tâches, le pattern est stable : les couches les plus contributives se situent systématiquement au milieu de la pile transformer.
Chaleur 6
Pertinence 78
Nouveauté 82