HISTOIRESMORALES: Un jeu de données français pour évaluer l'alignement moral des modèles de langage
Thibaud Leteno, Irina Proskurina, Antoine Gourru, Julien Velcin, Charlotte Laclau, Guillaume Metzler, Christophe Gravier
Résumé : L'alignement des modèles de langage avec les valeurs humaines est essentiel, à mesure qu'ils s'intègrent dans la vie quotidienne. Ces modèles sont souvent adaptés aux préférences des utilisateurs mais il est important de veiller à ce qu'ils respectent des normes morales en situation réelle. Malgré des avancées dans d'autres langues, le raisonnement moral des modèles en français reste peu étudié. Pour combler cette lacune, nous présentons HistoiresMorales, un jeu de données français dérivé de MoralStories, traduit puis affiné avec des locuteurs natifs pour assurer précision grammaticale et ajustement culturel. Afin de favoriser de futures recherches, nous menons des expériences préliminaires sur l'alignement des modèles multilingues en français et en anglais. Bien que les modèles de langage s'alignent généralement sur les normes morales humaines, nous observons qu'ils restent influençables, tant vers un alignement moral qu'immoral.
Mots clés : Jeu de données, Éthique, Moral, Alignement des Modèles de Langage.