MathDuels : évaluer les LLM comme poseurs et solveurs de problèmes mathématiques

MathDuels est un benchmark en self-play où chaque LLM joue un double rôle : auteur de problèmes mathématiques sous prompting adversarial et solveur des problèmes produits par les autres participants. Un pipeline en trois étapes génère et valide les problèmes, tandis qu'un modèle de Rasch estime conjointement les capacités des solveurs et la difficulté des problèmes. Testé sur 19 modèles frontier, le benchmark révèle que les aptitudes de création et de résolution sont partiellement découplées, et que sa difficulté évolue avec les participants sans atteindre de plafond fixe.