ATALA http://www.atala.org/ fr ATALA http://www.atala.org/IMG/ruboff0.gif http://www.atala.org/ 1. Éditorial http://www.atala.org/Editorial 2008-05-07 11:25:08 * LIMSI - CNRS <br />B.P. 133 <br />91403 Orsay Cedex <br />France <br />** MdRNT / Université Lille 3 <br />*** The MITRE Corporation <br />202 Burlington Road <br />Bedford, MA 01730 <br />États-Unis <br />lynette@mitre.org <br />Cet article sera disponible prochainement. * LIMSI - CNRS <br />B.P. 133 <br />91403 Orsay Cedex <br />France <br />** MdRNT / Université Lille 3 <br />*** The MITRE Corporation <br />202 Burlington Road <br />Bedford, MA 01730 <br />États-Unis <br />lynette@mitre.org <br />Cet article sera disponible prochainement. Rédacteurs en chef 2008-05-07T09:25:08Z text/html fr Rédacteurs en chef 2. Pour l'évaluation externe des systèmes de TA par des méthodes fondées sur la tâche http://www.atala.org/Pour-l-evaluation-externe-des 2008-05-07 11:24:59 Les méthodes externes d'évaluation de systèmes de TA définissent des mesures de qualité à partir des résultats de TA et de leur usage. Alors que les systèmes opérationnels sont depuis longtemps le plus souvent évalués par des méthodes fondées sur la tâche, les campagnes d'évaluation des dernières années utilisent (...) Les méthodes externes d'évaluation de systèmes de TA définissent des mesures de qualité à partir des résultats de TA et de leur usage. Alors que les systèmes opérationnels sont depuis longtemps le plus souvent évalués par des méthodes fondées sur la tâche, les campagnes d'évaluation des dernières années utilisent (...) Rédacteurs en chef 2008-05-07T09:24:59Z text/html fr Rédacteurs en chef 3. Le rôle des métriques d'évaluation dans le processus de recherche en TAL http://www.atala.org/Le-role-des-metriques-d-evaluation 2008-05-07 11:24:49 Le traitement automatique des langues (TAL) relève à la fois de la démarche scientifique et de la démarche technologique. Dans les deux cas, l'évaluation des systèmes informatiques implémentés est indispensable pour estimer le succès d'une recherche. S'inspirant du cadre ISO pour l'évaluation des logiciels, et (...) Le traitement automatique des langues (TAL) relève à la fois de la démarche scientifique et de la démarche technologique. Dans les deux cas, l'évaluation des systèmes informatiques implémentés est indispensable pour estimer le succès d'une recherche. S'inspirant du cadre ISO pour l'évaluation des logiciels, et (...) Rédacteurs en chef 2008-05-07T09:24:49Z text/html fr Rédacteurs en chef 4. Trois expériences d'évaluation dans le cadre du développement d'un système d'alignement sous-phrastique http://www.atala.org/Trois-experiences-d-evaluation 2008-05-07 11:24:41 Nous présentons la démarche que nous avons adoptée pour mener à bien une évaluation système dans le contexte du développement d'un système d'alignement sous-phrastique, ALIBI. À cet égard, nous examinons trois procédures d'évaluation qui correspondent à des aspects fondamentaux de la mise au point de systèmes de (...) Nous présentons la démarche que nous avons adoptée pour mener à bien une évaluation système dans le contexte du développement d'un système d'alignement sous-phrastique, ALIBI. À cet égard, nous examinons trois procédures d'évaluation qui correspondent à des aspects fondamentaux de la mise au point de systèmes de (...) Rédacteurs en chef 2008-05-07T09:24:41Z text/html fr Rédacteurs en chef 5. SIMDIAL - Un paradigme pour évaluer automatiquement des systèmes de dialogue homme-machine en simulant un utilisateur de façon déterministe http://www.atala.org/SIMDIAL-Un-paradigme-pour-evaluer 2008-05-07 11:24:32 Cet article présente SIMDIAL, un paradigme d'évaluation des comportements de Systèmes de Dialogue Homme-Machine (SDHM). Ce paradigme est fondé sur la simulation déterministe d'utilisateurs et permet une évaluation automatique ou semi automatique des SDHM face à des tâches précises. Il utilise le langage naturel (...) Cet article présente SIMDIAL, un paradigme d'évaluation des comportements de Systèmes de Dialogue Homme-Machine (SDHM). Ce paradigme est fondé sur la simulation déterministe d'utilisateurs et permet une évaluation automatique ou semi automatique des SDHM face à des tâches précises. Il utilise le langage naturel (...) Rédacteurs en chef 2008-05-07T09:24:32Z text/html fr Rédacteurs en chef 6. Evaluation in Natural Language Generation: Lessons from Referring Expression Generation http://www.atala.org/Evaluation-in-Natural-Language 2008-05-07 11:24:23 As one of the most well-defined subtasks in Natural Language Generation (NLG), the generation of referring expressions looks like a strong candidate for piloting shared evaluation tasks. Different to other areas of Natural Language Processing, it is still unclear what benefit the introduction (...) As one of the most well-defined subtasks in Natural Language Generation (NLG), the generation of referring expressions looks like a strong candidate for piloting shared evaluation tasks. Different to other areas of Natural Language Processing, it is still unclear what benefit the introduction (...) Rédacteurs en chef 2008-05-07T09:24:23Z text/html en Rédacteurs en chef 7. Terminologie et paramètres expérimentaux pour l'évaluation des résumés automatiques http://www.atala.org/Terminologie-et-parametres 2008-05-07 11:24:12 Dans cet article, nous proposons d'abord une terminologie française pour la présentation des résultats d'évaluation de résumés automatiques. Ensuite, nous décrivons les paramètres expérimentaux devant être précisés lors de la présentation des résultats d'une évaluation. Ces paramètres expérimentaux, identifiés à partir d'une (...) Dans cet article, nous proposons d'abord une terminologie française pour la présentation des résultats d'évaluation de résumés automatiques. Ensuite, nous décrivons les paramètres expérimentaux devant être précisés lors de la présentation des résultats d'une évaluation. Ces paramètres expérimentaux, identifiés à partir d'une (...) Rédacteurs en chef 2008-05-07T09:24:12Z text/html fr Rédacteurs en chef 8. Prosodic Phrase Break Prediction: Problems in the Evaluation of Models against a Gold Standard http://www.atala.org/Prosodic-Phrase-Break-Prediction 2008-05-07 11:24:00 The goal of automatic phrase break prediction is to identify prosodic-syntactic boundaries in text which correspond to the way a native speaker might process or chunk that same text as speech. This is treated as a classification task in machine learning and output predictions from language (...) The goal of automatic phrase break prediction is to identify prosodic-syntactic boundaries in text which correspond to the way a native speaker might process or chunk that same text as speech. This is treated as a classification task in machine learning and output predictions from language (...) Rédacteurs en chef 2008-05-07T09:24:00Z text/html en Rédacteurs en chef 98. Notes de lecture http://www.atala.org/Notes-de-lecture 2008-05-07 11:23:50 Rédacteurs en chef 2008-05-07T09:23:50Z text/html fr Rédacteurs en chef 99. Résumés de thèses http://www.atala.org/Resumes-de-theses 2008-05-07 11:23:39 Rédacteurs en chef 2008-05-07T09:23:39Z text/html fr Rédacteurs en chef