Quantifier l'expression fidèle de la confiance dans les grands modèles de raisonnement

Des chercheurs proposent un cadre pour mesurer la calibration fidèle (FC) des grands modèles de raisonnement (LRMs), soit l'alignement entre leur confiance intrinsèque et celle exprimée linguistiquement. Le framework analyse la décisivité linguistique via les probabilités de tokens, les états cachés et la cohérence des réponses échantillonnées. Résultat : les comportements de raisonnement ne se traduisent pas automatiquement par une meilleure FC, soulevant des questions sur la fiabilité perçue des LRMs.