talnarchives

Une archive numérique francophone des articles de recherche en Traitement Automatique de la Langue.

Participation d'EDF R&D au défi DEFT 2023 : réponses automatiques à des questionnaires à choix multiples à l'aide de « Larges Modèles de Langue »

Meryl Bothua, Leila Hassani, Marie Jubault, Philippe Suignard

Résumé : Ce papier présente la participation d'EDF R&D à la campagne d'évaluation DEFT 2023. Notre équipe a participé à la tâche de réponse automatique à des questions à choix multiples issus d'annales d'examens en pharmacie en français. Le corpus utilisé est FrenchMedMCQA. Nous avons testé des Large Language Models pour générer des réponses. Notre équipe s'est classée A COMPLETER.

Mots clés : Gros modèles de langue, Bloom, BloomZ, ChatGPT, Questions à choix multiples, pharmacie