Vers l’évaluation automatique de résumés oraux d’enfants : Étude exploratoire de métriques de compréhension
Agathe Wallet, Brice Brossette, Lucile Gelin, Stéphane Huet, Nathalie Camelin
Résumé : Apprendre à lire nécessite le développement de stratégies de compréhension, dont l’évaluation est un enjeu pédagogique majeur. Le projet ANONYM propose une plateforme numérique d’entraînement au résumé oral destinée aux élèves de CM1-CM2, intégrant un outil d’évaluation automatique. Cet article étudie la pertinence de l'application de métriques standard, initialement conçues pour l'écrit, à des résumés oraux d’enfants. Après une présentation de la plateforme, nous détaillons les caractéristiques principales du corpus collecté et proposons un protocole permettant de générer automatiquement une mesure de compréhension. Les scores ROUGE et BERTScore sont comparés aux évaluations humaines, permettant d'analyser les divergences et d'identifier les spécificités de ce type de données. Cette première étude ouvre la voie au déploiement complet de l’exercice.
Mots clés : résumé oral, évaluation automatique, compréhension de la lecture