VEHBench : un benchmark diagnostique par étapes pour la conception de récupérateurs d'énergie vibratoire assistée par LLM

VEHBench est un benchmark natif de l'ingénierie destiné à évaluer les LLM sur la conception de récupérateurs d'énergie vibratoire pour l'IoT sans batterie. Il comprend 763 tâches notées par un oracle physique analytique, couvrant le tri des spécifications, la recherche guidée par vérificateur, la récupération d'états corrompus et la sélection conditionnée par politique. Les résultats montrent qu'aucun modèle ne domine sur l'ensemble du workflow, la performance étant fortement dépendante de l'étape considérée.