Le token comme élément de groupe : attention sur les groupes de Lie matriciels

Cette étude propose un mécanisme d'attention — baptisé Lie-Algebra Attention — dans lequel les tokens sont directement des éléments d'un groupe de Lie matriciel. Le score de similarité est calculé via la norme algébrique en forme fermée de la pose relative, sans noyau appris ni représentations irréductibles. L'équivariance sous l'action diagonale du groupe est tautologique, et la construction s'étend aux groupes affines non-compacts (avec échelle et cisaillement) inaccessibles aux méthodes existantes.