RECHERCHE
Reconnaissance vocale via modèle de langage à diffusion discret
Cette approche remplace les décodeurs autoregressifs par un modèle de diffusion discret entraîné sur seulement 0,16 % des paramètres.
arXiv cs.AI · cs.LG · cs.CL·Harsha Vardhan Khurdula, Abhinav Kumar Singh, Yoeven D Khemlani, Vineet Agarwal·14 juillet 2026
Image · Source originale
Les chercheurs proposent d'utiliser un modèle de langage à diffusion discret (DiffusionGemma 26B) pour la reconnaissance vocale, abandonnant les décodeurs autoregressifs. Un encodeur Whisper gelé extrait les caractéristiques audio, tandis que des projecteurs légers et des adaptateurs de rang faible mappent le signal vers le texte. Le modèle atteint un taux d'erreur de mots de 6,6 % sur LibriSpeech en huit étapes parallèles, supportant six langues.
Chaleur 7
Pertinence 70
Nouveauté 80