RECHERCHE
EADP : élagage de tokens visuels guidé par l'entropie pour les VLMs
Une nouvelle méthode structure la compression de tokens visuels comme un problème de maximisation submodulaire, filtrant le bruit textuel par entropie statistique.
arXiv cs.AI · cs.LG · cs.CL·Xuehui Wang, Xuankun Yang, Wei Shen·2 juillet 2026
Image · Source originale
EADP (Entropy-Aware Dense Pruning) propose un cadre d'élagage de tokens visuels pour accélérer les VLMs en traitant deux goulots d'étranglement : la dispersion du bruit textuel qui fausse les scores cross-modaux, et la fragmentation des représentations lors de la sélection Top-K classique. La méthode quantifie le bruit par entropie statistique et reformule la sélection comme une maximisation submodulaire avec prior spatial. Les résultats montrent un état de l'art sur plusieurs benchmarks multimodaux sous contraintes budgétaires strictes.
Chaleur 6
Pertinence 72
Nouveauté 74