RITUEL RENCONTRE EVALUATION EN TRAITEMENT AUTOMATIQUE DES LANGUES

Pour sa reprise en virtuel du fait de la situation de pandémie, le GT RITUEL propose une journée d'étude faisant la part belle (mais sans exclusion) aux jeunes chercheurs et chercheuses, en se focalisant entre autres sur des recherches portant sur la coréférence et les entités polylexicales.

Cette journée a eu lieu le Jeudi 6 février 2020 - Hotel Dupamloup (Orléans)

Programme

10:45-11:00 Jean-Yves Antoine (LIFAT) : présentation de la journée : quelle évaluation pour le TAL, entre évaluation techno-centrée et évaluation centrée utilisateur
11:00-12:30 Evaluation : pratiques en entreprises
11:00-11:30 Julien Kahn (EDF R&D) : Aapproche centrée utilisateur : contexte et besoins d'évaluation TAL pour les Regles Générales d'Exploitation
11:30-12:00 Eric Clairambault (Aktan): Pratiques d'évaluation autour d'UKO Voice sur des exemples de projets clients
12:00-12:30 Vincent Godard (BRGM) : Pratiques d'évaluation ergonomique au BRGM
12:30-14:00 Pause
14:00-16:30 Evaluation : pratiques en recherche universitaire
14:00-14:30 Anne-Lyse Minard (LLL) : Mesures classiques d'évaluation appliquées a la classification de tweets ou la recherche d'information
14:30-15:00 Jean-Yves Antoine (LIFAT) :  Fiabilité de l'annotation - mesures d'accord inter-annotateur : principes, limites
15:00-15:30 Adam LION (LIFAT) : Evaluer la détection des cahines de coréférences : pratiques et biais
15-30:16:30 Discussion : verbatim des échanges

Organisation