RECHERCHE
AlignAtt4LLM : AlignAtt rapide pour les LLM décodeur-only à IWSLT 2026
Première application de la politique AlignAtt à un LLM décodeur-only pour la traduction simultanée de la parole, sans attention croisée encodeur-décodeur.
arXiv cs.AI · cs.LG · cs.CL·Quentin Fuxa, Dominik Macháček·2 juin 2026

Image · Source originale
AlignAtt4LLM est un système de traduction simultanée de la parole (anglais vers allemand, italien et chinois) soumis à IWSLT 2026. Il combine Qwen3-ASR pour la transcription incrémentale et Gemma-4 E4B-it pour la traduction, pilotée par une politique AlignAtt adaptée aux architectures décodeur-only. Quatre adaptations clés permettent de contourner l'absence d'attention croisée encodeur-décodeur. Le système surpasse les baselines fournies pour l'allemand et l'italien dans les deux régimes de latence testés.