Le projet CESTA propose une série de campagnes d’évaluation de systèmes de traduction automatique pour diverses paires de langues vers le français.
Ce projet, qui a débuté en janvier 2003, est financé par le Ministère de la Recherche français dans le cadre du programme Technolangue. Il constitue une avancée par rapport aux campagnes d’évaluation de la traduction automatique, jusqu’ici menées par le NIST (aux Etats-Unis) en se basant sur les métriques d’évaluation statistique NIST/BLEU (IBM).
Dans le cadre de CESTA, ces mêmes métriques sont appliqués au français langue cible, mais d’autres métriques automatiques sont également appliqués, qui se basent sur les notions de score grammatical et de score sémantique.
Les mérites respectifs des diverses métriques sont étudiés au cours d’une phase de méta-évaluation par rapport à l’évaluation de juges humains.

Contacts

  Khalid Choukri
  Olivier Hamon
  Widad Mustafa el Hadi

Coordinateur

  ELDA

Participants

  Université de Lille 3, IDIS/CESARTES
  Ecole Polytechnique Fédérale de Lausanne, LIA
  Université de Leeds
  Temis S.A.
  Systran S.A.
  Softissimo S.A.
  CIMOS S.A.
  Université de Grenoble, IMAG
  Université de Montréal, Dept. Linguistique et Traduction
  Université de Montréal, RALI
  Université de Genève, ISSCO
  University of Aachen, RWTH
  Universitat Politècnica de Catalunya (UPC)
  SDL International
  Comprendium S.L.

Pour plus d’informations, visitez le site Technolangue.Net.