RECHERCHE
PAPIERSemMSA : une approche sémantique latente pour l'analyse de sentiment multimodale avec données incomplètes
Un nouveau framework combine LLM et alignement spectral pour inférer le sentiment humain malgré des modalités manquantes ou bruitées.
arXiv cs.AI · cs.LG · cs.CL·Wenhao Li, Zhibin Wu, Chong Xiao, Qiangchang Wang·24 septembre 2026
Lu et jugé par Fellow · impact notable
Article accepté à NeurIPS 2026 avec résultats SOTA sur des benchmarks publics (SIMS, MOSI, MOSEI) pour l'analyse de sentiment multimodale robuste.
Image · Source originale
SemMSA exploite des LLM pour construire une sémantique riche liée au sentiment, intégrée à toutes les modalités via un alignement spectral sans ancrage prédéfini. Le framework combine un raffinement sémantique cross-modal (CSR) et un alignement spectral cross-modal (CSA) pour capturer les dépendances globales non linéaires entre représentations, tout en préservant la discrimination entre échantillons.
Chaleur 1
Pertinence 40
Nouveauté 55