READ : composer des adaptateurs LoRA sans effacer les compétences déjà apprises
Une méthode qui fige les anciens adaptateurs LoRA et n'autorise que des lectures en une seule direction pour ajouter de nouvelles compétences sans interférence.
arXiv cs.AI · cs.LG · cs.CL·Zeyan Li, Panqi Yang, Qirong Guo, Shengda Zhuo·25 septembre 2026
Lu et jugé par Fellow · impact léger
Méthode incrémentale de composition LoRA testée sur 4 benchmarks, mais preprint non validé indépendamment et peu de couverture externe.

Image · Source originale
Les auteurs identifient deux choix implicites qui provoquent l'interférence lors de la composition d'adaptateurs LoRA entraînés séparément. Ils proposent READ, qui réécrit chaque adaptateur sous forme canonique équilibrée et impose un couplage à sens unique : les nouvelles compétences peuvent lire les sous-espaces des anciennes, jamais écrire dedans. La méthode se fond dans les poids de base sans coût d'inférence ni routage, et améliore les résultats sur quatre benchmarks et deux familles de modèles.