Au-delà de LoRA : peut-on surpasser la technique de fine-tuning la plus populaire ?

Hugging Face publie une analyse comparative des méthodes PEFT au-delà de LoRA, la technique de fine-tuning à faible rang devenue référence. L'article évalue des approches alternatives — comme DoRA, LoRA+, LoftQ ou encore IA3 — sur différents benchmarks et scénarios d'usage. L'objectif est de déterminer dans quels cas ces méthodes peuvent surpasser LoRA en termes de performance ou d'efficacité.