@inproceedings{Oukelmoun-Semmar-de-Chalendar-Cormi-Oukelmoun-Vibert-Allard:CORIA-TALN:2025,
    author = {Oukelmoun, Achir and Semmar, Nasredine and de Chalendar, Ga\"el and Cormi, Clement and Oukelmoun, Mariame and Vibert, Eric and Allard, Marc-Antoine},
    title = "D\'etection des omissions dans les r\'esum\'es m\'edicaux g\'en\'er\'es par les grands mod\`eles de langue",
    booktitle = "Actes de CORIA-TALN-RJCRI-RECITAL 2025. Actes des 32\`eme Conf\'erence sur le Traitement Automatique des Langues Naturelles (TALN),  volume 1 : articles scientifiques originaux",
    month = "6",
    year = "2025",
    address = "Marseille, France",
    publisher = "Association pour le Traitement Automatique des Langues",
    pages = "252-267",
    note = "",
    abstract = "Les grands mod\`eles de langue (LLMs) sont de plus en plus utilis\'es pour r\'esumer des textes m\'edicaux, mais ils risquent d'omettre des informations critiques, compromettant ainsi la prise de d\'ecision. Contrairement aux hallucinations, les omissions concernent des faits essentiels absents. Cet article introduit un jeu de donn\'ees valid\'e en fran\c{c}ais pour d\'etecter ces omissions et propose EmbedKDECheck, une approche frugale et sans r\'ef\'erence. A l'oppos\'e des m\'ethodes bas\'ees sur les LLMs, cette approche utilise des plongements lexicaux issus d'un mod\`ele de Traitement Automatique des Langues (TAL) l\'eger combinant FastText et Word2Vec selon un algorithme pr\'ecis coupl\'e \`a un mod\`ele non-supervis\'e fournissant un score d'anomalie. Cette approche permet d'identifier efficacement les omissions \`a faible co\^ut computationnel. EmbedKDECheck a \'et\'e \'evalu\'e face aux frameworks de l'\'etat de l'art (SelfCheckGPT, ChainPoll, G-Eval et GPTScore) et a montr\'e de bonnes performances. Notre m\'ethode renforce l'\'evaluation de la fiabilit\'e des LLMs et contribue \`a une prise de d\'ecision m\'edicale plus s\^ure.",
    keywords = "LLMs, d\'etection d'omissions, \'evaluation, qualit\'e des r\'esum\'es m\'edicaux, IA frugale.",
    url = "https://talnarchives.atala.org/TALN/TALN-2025/30.pdf"
}