Les LLM réutilisent la syntaxe humaine plus que les humains

Des chercheurs ont analysé la convergence syntaxique de seize modèles Llama et Gemma, couvrant de 1 à 70 milliards de paramètres. En remplaçant les tours de parole dans des dialogues humains, l'étude révèle que chaque modèle réutilise davantage les règles de grammaire du tour précédent qu'un humain ne le ferait. Ce phénomène s'intensifie avec l'instruction-tuning, bien que les modèles finement réglés montrent aussi plus de similarité avec des phrases aléatoires.