CLAS : pilotage d'activation linéaire contextuel pour les LLM

CLAS (Contextual Linear Activation Steering) introduit un mécanisme de pilotage par activation linéaire dont l'intensité s'adapte au contexte de chaque token, contrairement aux méthodes classiques à force fixe. Évalué sur onze benchmarks et quatre familles de modèles, CLAS surpasse le steering linéaire standard et rivalise avec ReFT et LoRA en régime de données étiquetées limitées. Les auteurs le proposent comme alternative scalable, interprétable et précise pour spécialiser les LLM.