Évaluation des outils terminologiques : enjeux, difficultés et propositions

Adeline Nazarenko*, Haïfa Zargayouna*, Olivier Hamon*,** and Jonathan van Puymbrouck*
*Laboratoire d’Informatique de Paris-Nord (CNRS - Univ. Paris 13, UMR 7030); 99, avenue J.B. Clément, F-93430 Villetaneuse; prenom.nom@lipn.univ-paris13.fr
**ELDA; 55-57 rue Brillat-Savarin, 75013 Paris; hamon@elda.org
Résumé
Cas particulier parmi les tâches de traitement automatique des langues, l’acquisition terminologique n’a guère fait l’objet d’évaluation systématique jusqu’à présent. Les campagnes qui ont eu lieu sont récentes et limitées. Il est cependant nécessaire de conduire des évaluations pour faire le bilan des recherches passées, mesurer les progrès accomplis et les angles morts. Cet article défend l’idée qu’on peut définir des protocoles d’évaluation comparative même pour des tâches complexes comme la terminologie computationnelle. La méthode proposée s’appuie sur une décomposition des outils d’analyse terminologique en fonctionnalités élémentaires ainsi que sur la définition de mesures de précision et de rappel adaptées aux problèmes terminologiques, à savoir la complexité des produits terminologiques, la dépendance aux applications, le rôle de l’interaction avec l’utilisateur et la variabilité des terminologies de référence.
Paru dans