RECHERCHE
SM4RT : apprendre une géométrie de mouvement structurée pour la reconstruction 4D
Un nouveau transformer reconstruit en un seul passage la géométrie 3D et le mouvement structuré à partir d'une vidéo RGB monoculaire.
arXiv cs.AI · cs.LG · cs.CL·Shing Ho J. Lin, Wenzhao Zheng, Dong Zhuo, Yuqi Wu·24 juillet 2026

Image · Source originale
SM4RT propose une représentation dite « Structure-of-Motion » qui décompose le mouvement d'une scène en un ensemble compact de bases de mouvement rigide, exprimées en SE(3). Le modèle infère conjointement la géométrie 3D, le mouvement en coordonnées monde et la structure cinématique de la scène à partir d'une vidéo monoculaire, en un seul passage avant. Cette approche exploite le fait que les objets réels suivent des transformations rigides plutôt que des déplacements point par point indépendants.