@inproceedings{Denis:CORIA-TALN-2026:2026,
    author = "Denis, Christophe",
    title = "Fabrique s\'emiotique hybride et \'evaluation stratifi\'ee des syst\`emes RAG sur SciFact",
    booktitle = "Actes de CORIA-TALN 2026. Actes de l'atelier sur l'\'evaluation des mod\`eles g\'en\'eratifs (LLM) et challenges (EvalLLM 2026)",
    month = "6",
    year = "2026",
    address = "Nantes, France",
    publisher = "Association pour le Traitement Automatique des Langues",
    pages = "99-110",
    note = "",
    abstract = "Cet article propose, dans le cadre de la fabrique s\'emiotique hybride, une m\'ethodologie stratifi\'ee et tra\c{c}able d'\'evaluation des syst\`emes RAG sur SciFact. Hermes-HSF articule des m\'etriques classiques de recherche d'information avec des indicateurs op\'erationnels portant sur l'ancrage, les citations, les r\'eponses de repli et la stabilit\'e. L'analyse montre qu'une meilleure r\'ecup\'eration documentaire ne garantit pas une meilleure r\'eponse, ce qui justifie une \'evaluation des m\'ediations internes de la cha{\^\i}ne RAG.",
    keywords = "RAG, \'evaluation, r\'ecup\'eration documentaire, reclassement, SciFact, LLM",
    url = "730193.pdf"
}