AdaPrefix-GRPO : contrôle adaptatif du préfixe pour maximiser le signal d'entraînement sur les problèmes difficiles

GRPO échoue sur les problèmes les plus difficiles : si aucun rollout du groupe ne réussit, le gradient devient nul. AdaPrefix-GRPO injecte un préfixe de solution de longueur variable, ajusté en continu pour maintenir un taux de succès proche de 50 % — là où le signal gradient est maximal — puis retire progressivement cette aide. Sur des benchmarks mathématiques durs, la méthode multiplie par 2,1x la précision d'un modèle 0,6B et par 1,7x sur AIME, tout en réduisant la longueur des traces de moitié.