@inproceedings{Aubert-Beduchaud-Boudin-Aizawa-Daille-Dufour:CORIA-TALN-2026:2026,
    author = "Aubert-B\'educhaud, Julien and Boudin, Florian and Aizawa, Akiko and Daille, Beatrice and Dufour, Richard",
    title = "Vers une annotation fiable des contributions scientifiques dans les articles soumis \`a l{\textquoteright}ACL Rolling Review",
    booktitle = "Actes de CORIA-TALN 2026. Actes des 33\`eme Conf\'erence sur le Traitement Automatique des Langues Naturelles.  Volume 2 : articles d\'ej\`a publi\'es",
    month = "6",
    year = "2026",
    address = "Nantes, France",
    publisher = "Association pour le Traitement Automatique des Langues",
    pages = "58-58",
    note = "",
    abstract = "Face \`a l{\textquoteright}explosion du nombre de publications scientifiques, les chercheurs rencontrent des difficult\'es croissantes pour \'evaluer de mani\`ere efficace l{\textquoteright}int\'er\^et des nombreux articles disponibles. Identifier les types de contributions principales d{\textquoteright}un article peut permettre aux lecteurs d{\textquoteright}appr\'ehender rapidement sa valeur et son originalit\'e. Dans ce contexte, l{\textquoteright}ACL Rolling Review (ARR) a mis en place une typologie obligeant les auteurs \`a pr\'eciser explicitement leurs contributions dans le but d{\textquoteright}am\'eliorer la qualit\'e et l{\textquoteright}\'equit\'e du processus d{\textquoteright}\'evaluation. Toutefois, cette typologie souffre d{\textquoteright}un manque de d\'efinitions pr\'ecises et de lignes directrices claires, ce qui engendre des \'etiquetages inconsistants et soul\`eve des interrogations quant \`a sa fiabilit\'e. Notre campagne de r\'e-annotation d{\textquoteright}un ensemble d{\textquoteright}articles soumis \`a l{\textquoteright}ARR met en \'evidence des \'ecarts significatifs entre les annotations des auteurs et celles des experts. Par ailleurs, les pr\'edictions des grands mod\`eles de langue (LLM) lorsque compar\'ees \`a celles des experts sont proches de celles des auteurs. Ces mod\`eles pourraient ainsi constituer une aide pr\'ecieuse pour les auteurs lors de l{\textquoteright}annotation des contributions d{\textquoteright}articles destin\'ees \`a l{\textquoteright}ARR.",
    keywords = "ACL Rolling Review, Contributions scientifiques, Typologie, Annotation",
    url = "24.pdf"
}