RECHERCHE
TRACE : attribution de récompense au niveau des tours pour agents à long horizon
Une méthode d'apprentissage par renforcement affine le crédit accordé à chaque action d'un agent, sans critique additionnelle ni supervision coûteuse.
arXiv cs.AI · cs.LG · cs.CL·Leitian Tao, Baolin Peng, Wenlin Yao, Tao Ge·15 juillet 2026
Image · Source originale
TRACE propose une méthode d'attribution dense de récompense pour l'entraînement RL d'agents multi-tours utilisant des outils. Elle dérive des récompenses par action à partir de variations temporelles de log-probabilités issues d'un modèle de référence gelé, sans critique ni labels de processus supplémentaires. Sur le benchmark BrowseComp-Plus, elle fait passer Qwen3-4B de 7,2 à 35,6 et Qwen3-30B-A3B de 8,4 à 42,6.
Chaleur 11
Pertinence 70
Nouveauté 75