UniT : vers un langage physique unifié pour le transfert humain-humanoïde

UniT (Unified Latent Action Tokenizer via Visual Anchoring) est un framework qui établit un langage physique partagé entre humains et robots humanoïdes. Il repose sur un mécanisme de reconstruction croisée tri-branche : les actions prédisent la vision pour ancrer la cinématique aux conséquences physiques, tandis que la vision reconstruit les actions pour filtrer les distracteurs visuels. Validé sur l'apprentissage de politiques (VLA-UniT) et la modélisation du monde (WM-UniT), il atteint un transfert zéro-shot et une généralisation hors-distribution compétitive.