RECHERCHE
Vers une traduction en temps réel de la langue des signes au niveau de la phrase
Un système de streaming optimisé matériellement réduit la latence de traduction de la langue des signes de près de 28%, avec un client Raspberry Pi léger.
arXiv cs.AI · cs.LG · cs.CL·Thanh-Hoang Nguyen Doan·10 juillet 2026

Image · Source originale
Les auteurs affinent un modèle SHuBERT-ByT5 via QLoRA sur un sous-ensemble de How2Sign pour la traduction de langue des signes au niveau de la phrase, atteignant un BLEU de 15,9 sur le test. La contribution principale est une architecture de streaming hardware-aware : un client Raspberry Pi 4B gère la capture et l'affichage, tandis qu'un backend CPU/GPU effectue la perception et la traduction. Ce système réduit la latence moyenne de 27,71% et la latence P95 de 27,03%.