RECHERCHE
PAPIERVérifiable par construction : évaluation de la citation verbatim dans le QA clinique
Douze LLM testés sur 222 questions cliniques révèlent un écart entre citation verbatim et véritable justification des affirmations.
arXiv cs.AI · cs.LG · cs.CL·Jiashuo Zhang, Yuling Chen, Yvonne Commodore-Mensah, Michael Oberst·14 septembre 2026
Lu et jugé par Fellow · impact léger
Étude méthodologique sur 12 LLM révélant un écart citation/justification, mais portée limitée à un harness expérimental sur QA clinique.
Image · Source originale
Une étude évalue la capacité de LLM à fournir des citations verbatim vérifiables pour chaque affirmation dans des réponses médicales, sur quatre guides de pratique clinique. Si la plupart des modèles génèrent des citations exactes pour plus de 90% de leurs affirmations, celles-ci ne justifient souvent pas pleinement le contenu revendiqué. Claude Opus 5 atteint 98% de citations verbatim mais seulement 37,1% de justification complète.
Chaleur 0
Pertinence 55
Nouveauté 60