@inproceedings{Wilkens-Cardon-Folny-Francois:CORIA-TALN-2026:2026,
    author = "Wilkens, Rodrigo and Cardon, R\'emi and Folny, Vincent and Fran\c{c}ois, Thomas",
    title = "Correction automatique de textes d'apprenants et certification linguistique en fran\c{c}ais{\textasciitilde}: \'evaluation de la g\'en\'eralisabilit\'e, de l'accord et de la validit\'e",
    booktitle = "Actes de CORIA-TALN 2026. Actes des 33\`eme Conf\'erence sur le Traitement Automatique des Langues Naturelles.  Volume 2 : articles d\'ej\`a publi\'es",
    month = "6",
    year = "2026",
    address = "Nantes, France",
    publisher = "Association pour le Traitement Automatique des Langues",
    pages = "7-8",
    note = "",
    abstract = "Dans le domaine de la correction automatique de textes (CAT), les pratiques d'\'evaluation comparatives ont favoris\'e des approches minimalistes, en contraste avec les recommandations de protocoles d'\'evaluation tels que le cadre de validation bas\'e sur l'argumentation (ABV). Celui-ci pr\'econise une \'evaluation multidimensionnelle des syst\`emes, notamment dans le contexte des tests linguistiques \`a forts enjeux. Dans cet article, nous pr\'esentons une version am\'elior\'ee et plus concr\`ete du cadre ABV, int\'egrant une analyse de l'\'equit\'e, des corr\'elations avec des caract\'eristiques linguistiques, une \'evaluation des erreurs de pr\'ediction et l'accord entre les mod\`eles et les correcteurs humains. En appliquant ce cadre \`a la CAT en fran\c{c}ais, nous comparons 8 architectures de mod\`eles sur un corpus de 27{\textasciitilde}000 r\'edactions d'examen (deux{\textasciitilde}correcteurs chacune) et un corpus de g\'en\'eralisation de 961{\textasciitilde}r\'edactions (au moins neuf{\textasciitilde}correcteurs chacune). Nos analyses illustrent les avantages de l'application du cadre ABV pour mieux comprendre les capacit\'es et les limites des mod\`eles de CAT, tout en faisant progresser l'\'etat de l'art pour la CAT en fran\c{c}ais.",
    keywords = "correction automatique de textes, certification en langues, cadre de validation bas\'e sur l'argumentation, fran\c{c}ais, TAL",
    url = "93.pdf"
}