RECHERCHE
Les LLMs conditionnés par prompt ne peuvent pas être des solveurs universels
Une étude théorique formelle démontre l'existence de limites irréductibles aux LLMs pilotés par prompt, indépendamment de la taille des modèles ou des données.
arXiv cs.AI · cs.LG · cs.CL·David Mguni, Julian Ma, Jun Wang·22 juin 2026

Image · Source originale
Des chercheurs modélisent l'interaction utilisateur-système comme un jeu de « cheap-talk » bilinéaire et dérivent des bornes PAC-Bayes pour analyser les LLMs conditionnés par prompt. Ils établissent deux planchers irréductibles : un « expressivity floor » lié à la capacité limitée du langage comme canal de communication, et un « objective-misalignment floor » dû aux contraintes d'alignement. Conclusion : il existe des familles de tâches pour lesquelles un comportement correct est formellement inatteignable par prompting seul, quelles que soient les données ou l'échelle du modèle.