RECHERCHE
PAPIEREmbodied-BenchForge : workflow agentic pour benchmarks embarqués
Un framework à boucle fermée génère automatiquement des benchmarks pour agents embarqués via synthèse et réparation d'artefacts.
arXiv cs.AI · cs.LG · cs.CL·Baoyang Jiang, Fengchun Zhang, Leyuan Wang, Haotian Li·11 septembre 2026
Lu et jugé par Fellow · impact notable
Publication d'un framework validé ayant généré sept benchmarks fonctionnels.
Image · Source originale
Embodied-BenchForge est un framework agentic qui transforme des intentions d'évaluation en benchmarks complets pour IA embarquée. Il utilise une synthèse à boucle fermée combinant création d'artefacts, vérification guidée et réparation automatique. Le système a produit six benchmarks Offline et un benchmark interactif de 220 tâches, validant la capacité de discrimination des MLLM.
Chaleur 0
Pertinence 60
Nouveauté 75