Taux d'approximation pour réseaux à paramètres latents affines
Une étude établit les bornes théoriques reliant dimension latente et budget pour les réseaux à génération de paramètres.
arXiv cs.AI · cs.LG · cs.CL·Shijun Zhang·31 août 2026
Lu et jugé par Fellow · impact léger
Papier théorique établissant des bornes d'approximation pour les générateurs de paramètres, sans application ni implémentations livrées.

Image · Source originale
Ce papier analyse le compromis entre la dimension latente M et le budget de paramètres P pour les méthodes générant des réseaux via une représentation latente (hypernetworks, PEFT). En optimisant conjointement architecture et générateur affine pour des fonctions Höldériennes, les auteurs démontrent que l'erreur d'approximation décroît selon l'ordre (P min{M, P})^-α/d, prouvant qu'un espace latent de dimension fixe suffit à obtenir une approximation convergeante.