| Titre | Élaboration du corpus DEMOCRAT : procédures d'annotation et d'évaluation | |
|---|---|---|
| Auteur | Matthieu Quignard, Marine Le Mené, Frédéric Landragin | |
 |
Revue | Langages |
| Numéro | no 224, décembre 2021 Un corpus annoté en chaînes de référence et son exploitation : le projet DEMOCRAT | |
| Page | 25-46 | |
| Résumé |
S'il existe déjà plusieurs corpus annotés manuellement en expressions référentielles et en chaînes de référence, il n'en existe aucun pour la langue française, ou alors pour des annotations qui relèvent plus de l'anaphore que de la coréférence. Le projet DEMOCRAT a produit un tel corpus, avec qui plus est une dimension diachronique. Sa conception a posé un ensemble de difficultés non seulement linguistiques mais aussi au niveau de l'homogénéité des annotations, de leur vérification et de l'évaluation de leur qualité. C'est cette dimension que nous proposons ici d'explorer et de discuter, en nous focalisant sur les conventions d'annotation et l'évaluation des annotations obtenues, procédure impliquant un calcul de l'accord inter-annotateurs. Cet article met ainsi en perspective le contenu du corpus democrat, pour légitimer les exploitations qui en seront faites. Source : Éditeur (via Cairn.info) |
|
| Résumé anglais |
There already exists several corpora that have been manually annotated in referring expressions and coreference chains. Nevertheless, none of them focuses on French language (or for annotations that are related to anaphora more than coreference). The DEMOCRAT project has produced such a corpus, with also a diachronic dimension. Its conception raised numerous difficulties, not only linguistic, but also in terms of the homogeneity of the annotations, as well as their verification and the evaluation of their quality. It is this dimension that we explore and discuss here, including concerns about annotation conventions and the evaluation of the annotations, a procedure involving the computation of the inter-annotators agreement. Thus, this article discusses the constitution and content of the democrat corpus, in order to legitimise the exploitations that will be made of it. Source : Éditeur (via Cairn.info) |
|
| Article en ligne | http://www.cairn.info/article.php?ID_ARTICLE=LANG_224_0025 (accès réservé) |
