Les LLM maîtrisent-ils la compréhension technique des papiers d'archi ?

Ce papier évalue si les LLM sont capables d'une compréhension technique profonde d'articles de recherche en architecture informatique. Les auteurs soumettent divers modèles à des tests de lecture critique et d'analyse de papiers académiques. Les résultats mettent en lumière les forces actuelles et les limites des LLM pour cette tâche cognitivement exigeante.