Towards (more) complex corpora annotation using a game with a purpose : the case of scientific language
Vers l'annotation par le jeu de corpus (plus) complexes : le cas de la langue de spécialité
Résumé
Towards (more) complex corpora annotation using a game with a purpose : the case of scientific language. We previously showed that participants in a game with a purpose can produce quality dependency syntax annotations. We present here the results of an experiment aiming at evaluating their production on a more complex corpus of scientific texts on DNA. We precisely describe the complexity of the corpus, then we evaluate the annotations produced by the players as compared to a gold corpus, annotated and adjudicated by experts of the domain.
Nous avons précédemment montré qu'il est possible de faire produire des annotations syntaxiques de qualité par des participants à un jeu ayant un but. Nous présentons ici les résultats d'une expérience visant à évaluer leur production sur un corpus plus complexe, en langue de spécialité, en l'occurrence un corpus de textes scientifiques sur l'ADN. Nous déterminons précisément la complexité de ce corpus, puis nous évaluons les annotations en syntaxe de dépendances produites par les joueurs par rapport à une référence mise au point par des experts du domaine.
| Origine | Fichiers produits par l'(les) auteur(s) |
|---|
Loading...