talnarchives

Une archive numérique francophone des articles de recherche en Traitement Automatique de la Langue.

CoRAFIG : corpus multi-genre pour la méta-évaluation du résumé automatique en français

Louis Jourdain, Skander Hellal

Résumé : CoRAFIG est le premier corpus français multi-genre de résumés automatiques, annoté sur cinq dimensions qualitatives et une couche d'erreurs explicites. Près de 1 000 résumés issus de 10 systèmes et 100 textes de six genres (presse, scientifique, juridique, financier, oral, littéraire) ont été annotés professionnellement. Contrairement aux corpus de presse existants, CoRAFIG évalue la robustesse des métriques face à la variation générique et sert de référence pour la méta-évaluation en français.

Mots clés : résumé automatique, corpus multi-genre, annotation humaine, méta-évaluation.