Recherche géométrique itérative pour la resynthèse de codecs audio neuronaux

Les codecs audio neuronaux basés sur la quantification vectorielle résiduelle (RVQ) souffrent d'une perte de fidélité lors de la resynthèse depuis des tokens grossiers. Les auteurs proposent la « recherche géométrique itérative », qui exploite la hiérarchie des couches RVQ comme décomposition itérative dans l'espace continu des codebooks, via une recherche contrastive plutôt qu'une classification discrète ou une régression simple. Les tests sur la restauration de codecs pour la parole et la musique montrent des gains par rapport aux approches par prédiction de tokens ou par régression en une étape.