Le routeur intérieur : révéler le routage natif de compétences d'un LLM figé
Une méthode légère exploite les signaux internes d'un LLM gelé pour choisir la bonne compétence, sans surcharger le contexte ni ajouter de modèle externe.
arXiv cs.AI · cs.LG · cs.CL·Ruishuo Chen, Xun Wang, Yu Chen, Zhuoran Li·14 septembre 2026
Lu et jugé par Fellow · impact léger
Méthode incrémentale de routage de compétences testée sur un seul backbone, sans évaluation indépendante ni déploiement.

Image · Source originale
Les chercheurs montrent qu'un LLM figé contient déjà, dans ses passes avant, le signal nécessaire pour router entre différentes compétences. Leur méthode Gavel utilise deux projections linéaires entraînées pour lire ce signal en deux étapes : un coup d'œil rapide puis un verdict basé sur la vraisemblance du modèle. Sur Qwen3-32B, Gavel surpasse des pipelines de récupération ajoutant jusqu'à 16 milliards de paramètres externes, avec des gains allant jusqu'à 21,9 points.