RECHERCHE
PAPIERRéponses invariantes à l'ordre, représentations sensibles à l'ordre dans le raisonnement mathématique
Une étude montre que les LLM performants encodent différemment les réordonnancements de règles, même quand la réponse finale reste identique.
arXiv cs.AI · cs.LG · cs.CL·Zhixu Silvia Tao·23 septembre 2026
Lu et jugé par Fellow · impact léger
Étude interprétable sur données synthétiques, résultat intéressant mais de portée limitée sans application pratique immédiate.
Image · Source originale
Des chercheurs testent 16 modèles de langage (1B à 8B paramètres) sur des problèmes synthétiques de composition de fonctions présentés sous plusieurs ordres de règles équivalents. Ils constatent que les modèles les plus précis sur ces réordonnancements représentent aussi de façon plus distincte les différents ordres en interne, avec une corrélation de Spearman atteignant 0,86. Cela suggère une distinction entre invariance de la réponse et invariance de la représentation interne.
Chaleur 0
Pertinence 45
Nouveauté 65