RECHERCHE
CompactionRL : apprentissage par renforcement avec compaction de contexte pour agents long-horizon
Une nouvelle stratégie RL permet aux agents LLM de gérer des tâches longues sans saturer la fenêtre de contexte, avec des gains mesurables sur SWE-bench.
arXiv cs.AI · cs.LG · cs.CL·Yujiang Li, Zhenyu Hou, Yi Jing, Jie Tang·6 juillet 2026
Image · Source originale
CompactionRL propose une méthode d'entraînement par renforcement pour agents LLM à long horizon, intégrant la compaction de contexte afin de dépasser les limites des fenêtres de contexte finies. L'approche optimise conjointement l'exécution des tâches et la génération de résumés via une normalisation de la perte au niveau token et une estimation d'avantage généralisée inter-trajectoires. Appliqué au modèle GLM-4.5-Air (106B-A30B), CompactionRL atteint 66,8 % sur SWE-bench Verified et 24,5 % sur Terminal-Bench 2.0. La méthode est déployée dans le pipeline RL du modèle GLM-5.2 (750B-A40B).
Chaleur 44
Pertinence 78
Nouveauté 74