RECHERCHE
PAPIERRéinventer la désagrégation de systèmes hétérogènes pour l'attention sous-quadratique
Le système SQD améliore le débit et l'efficacité énergétique des LLM en optimisant la répartition des tâches sur du matériel hétérogène.
arXiv cs.AI · cs.LG · cs.CL·Arya Tschand, Yaosheng Fu, Vikram Sharma Mailthody, Nicolai Oswald·11 septembre 2026
Lu et jugé par Fellow · impact notable
Une recherche système démontrant des gains de 31% à 56% sur des métriques d'énergie (tokens/J) pour des modèles actuels.
Image · Source originale
Le système SQD propose une nouvelle méthode de désagrégation pour les LLM utilisant une attention sous-quadratique, adaptant la répartition des tâches à l'intensité arithmétique et à l'empreinte mémoire spécifiques. Sur des systèmes hétérogènes combinant DRAM et SRAM, cette approche améliore l'efficacité énergétique de 31% à 56% par rapport aux solutions GPU classiques.
Chaleur 0
Pertinence 75
Nouveauté 65