G-Loss : fine-tuning guidé par graphe pour les modèles de langage

G-Loss est une fonction de perte guidée par graphe qui construit un graphe de similarité documentaire pour intégrer les relations sémantiques globales dans le fine-tuning de modèles comme BERT. Contrairement aux fonctions classiques (cross-entropy, contrastive, triplet), elle dépasse les voisinages locaux en propageant les labels sur le manifold d'embeddings. Évaluée sur cinq benchmarks de classification (analyse de sentiment, catégorisation thématique, documents médicaux), G-Loss converge plus vite et produit des espaces d'embeddings plus cohérents.