Typologie des questions à réponses multiples pour un système de question-réponse
Mathieu-Henri Falco
Résumé : L’évaluation des systèmes de question-réponse lors des campagnes repose généralement sur la validité d’une réponse individuelle supportée par un passage (question factuelle) ou d’un groupe de réponses toutes contenues dans un même passage (questions listes). Ce cadre évaluatif empêche donc de fournir un ensemble de plusieurs réponses individuelles et ne permet également pas de fournir des réponses provenant de documents différents. Ce recoupement inter-documents peut être necessaire pour construire une réponse composée de plusieurs éléments afin d’être le plus complet possible. De plus une grande majorité de questions formulées au singulier et semblant n’attendre qu’une seule réponse se trouve être des questions possédant plusieurs réponses correctes. Nous présentons ici une typologie des questions à réponses multiples ainsi qu’un aperçu sur les problèmes posés à un système de question-réponse par ce type de question.
Abstract : The evaluation campaigns of question-answering systems are generally based on the validity of an individual answer supported by a passage (for a factual question) or a group of answers coming all from a same supporting passage (for a list question). This framework does not allow the possibily to answer with a set of answers, nor with answers gathered from several documents. This cross-checking can be needed for building an answer composed of several elements in order to be as accurate as possible. Besides a large majority of questions with a singular form seems to be answered with a single answer whereas they can be satisfied with many. We present here a typology of questions with multiple answers and an overview of problems encountered by a question-answering system with this kind of questions.
Mots clés : question-réponse, questions à réponses multiples, question liste
Keywords : question-answering, multiple answer questions, list question