RECHERCHE
Fusion multimodale en cascade par LoRA pour la reconnaissance d'actions médicales
Une approche basée sur LoRA fusionne progressivement plusieurs modalités pour la reconnaissance d'actions en formation médicale.
arXiv cs.AI · cs.LG · cs.CL·Divya Mereddy, Jeevan Beedareddy·13 juillet 2026

Image · Source originale
Ce papier propose un cadre de fusion multimodale en cascade utilisant Low-Rank Adaptation (LoRA) pour la reconnaissance d'actions dans les environnements de formation santé. L'architecture combine une adaptation spécifique par modalité avec une fusion séquentielle, intégrant les données par étapes sans réentraîner les composants précédents. Les résultats sur les datasets NurViD et Nurse Training montrent une performance compétitive par rapport aux modèles existants.