Doc-to-Atom : une mémoire paramétrique compositionnelle pour les LLM

Doc-to-Atom propose un cadre de mémoire paramétrique compositionnelle qui fragmente chaque document en atomes de connaissance sémantiques, chacun compilé en un adaptateur micro-LoRA indépendant avec une clé de retrieval. À l'inférence, un routeur léger sélectionne et assemble les atomes pertinents en un adaptateur spécifique à la requête, injecté dans un modèle de base gelé. Évalué sur six benchmarks QA, Doc2Atom surpasse les approches Doc-to-LoRA tout en réduisant les coûts mémoire liés à l'internalisation des documents.