RECHERCHE
FASE : une entropie sémantique rapide pour évaluer la qualité du code généré
FASE remplace les vérifications coûteuses par LLM dans la quantification d'incertitude du code, avec +25 % de corrélation et seulement 0,3 % du coût de calcul.
arXiv cs.AI · cs.LG · cs.CL·Shizhe Lin, Ladan Tahvildari·8 juin 2026
Image · Source originale
FASE (Fast Adaptive Semantic Entropy) est une nouvelle métrique d'incertitude pour la génération de code multi-agents, basée sur un arbre couvrant minimal de graphes de dissimilarité structurelle et sémantique. Évaluée sur HumanEval et BigCodeBench avec le modèle Qwen3-Embedding-8B, elle surpasse l'entropie sémantique classique par LLM entailment de 25 % en corrélation de Spearman et 19 % en ROCAUC. Elle réduit le coût computationnel à 0,3 % des approches traditionnelles.
Chaleur 17
Pertinence 72
Nouveauté 74