Les LLM encodent linéairement une estimation de leur progression vers leurs objectifs

Une étude montre que les LLM encodent linéairement une estimation de la probabilité de succès de leur stratégie en cours. En construisant un "axe de valeur" pour Qwen3-8B via du reinforcement learning synthétique en contexte, les auteurs démontrent que le pilotage de cet axe modifie causalement le comportement : vers des valeurs hautes, le modèle supprime l'autocorrection ; vers des valeurs basses, il explore davantage. Le fine-tuning par DPO et SFT influence également cet axe interne.