SIMDIAL - Un paradigme pour évaluer automatiquement des systèmes de dialogue homme-machine en simulant un utilisateur de façon déterministe

Joseph Allemandou*, Laurent Charnay**, Laurence Devillers***, Muriel Lauvergne* and Joseph Mariani***
*France Telecom R&D; 2, av. Pierre Marzin; 22300 Lannion
**France Telecom; 27 rue Médéric; 75017 Paris; (joseph.allemandou,laurent.charnay,muriel.lauvergne)@orange-ftgroup.com
***LIMSI - CNRS; B.P. 133; 91403 Orsay Cedex; (devil,mariani)@limsi.fr
Résumé
Cet article présente SIMDIAL, un paradigme d’évaluation des comportements de Systèmes de Dialogue Homme-Machine (SDHM). Ce paradigme est fondé sur la simulation déterministe d’utilisateurs et permet une évaluation automatique ou semi automatique des SDHM face à des tâches précises. Il utilise le langage naturel pour interagir dynamiquement avec les systèmes évalués et est aisément transposable à différentes tâches de recherche d’information.