Génération de Questions-réponses expertes : YourExpertBench+
Markarit Vartampetian, Diandra Fabre, Philippe Mulhem, Fouad Hassani, Didier Schwab
Résumé : Nous présentons dans cet article YourExpertBench+, une extension de YourBench qui permet de générer des questions-réponses (QR) expertes, sourcées, à partir de documents écrits par des experts. Appliqués à des publications académiques en Ingénierie Hydraulique, notre approche est capable de générer plus de 13 000 couples questions-réponses de haute qualité, à un coût relativement faible. Nous utilisons les QR générées par YourExpertBench+ dans un cadre d'affinage supervisé, et nous montrons expérimentalement qu'un modèle général s’améliore nettement grâce à notre ensemble de données sur 2 collections de test.
Mots clés : LLM, Questions-Réponses Synthétiques, Affinage, Évaluation, Ingénierie Hydraulique