SAFETY
PAPIERUn détecteur de mensonges pour les LLM : accéder aux connaissances que le modèle dissimule
Une nouvelle méthode inspiree du test d'information dissimulée permet de détecter si un modèle ment par omission ou s'il ignore véritablement la réponse, en sondant ses états internes.
arXiv cs.AI · cs.LG · cs.CL·Hiskias Dingeto·18 septembre 2026
Lu et jugé par Fellow · impact notable
Méthode PIR vérifiable sur 8 modèles avec 0,70-0,87 de précision pour distinguer dissimulation active de ignorance réelle, sans modèle de référence.
Image · Source originale
Les LLM peuvent dissimuler des connaissances qu'ils possèdent, rendant impossible la distinction entre tromperie et ignorance via les seules sorties. La méthode Probe of Internal Recognition (PIR), inspirée du Test d'Information Cachée utilisé en forensique, identifie la réponse reconnue comme correcte dans les états internes du modèle. Sans nécessiter de modèle de référence ni de corpus étiqueté, PIR atteint une précision équilibrée de 0,70 à 0,87 sur huit modèles. La méthode reste efficace face à toutes les formes de dissimulation testées (leurre entraîné, verrouillage, sabotage de circuit), distinguant ainsi un modèle qui refuse de répondre d'un modèle qui ne peut pas répondre.
Chaleur 0
Pertinence 85
Nouveauté 88