Évaluation de systèmes évolutifs dans le cadre de la reconnaissance du locuteur et de la traduction - H/F Contexte Le projet Chist-Era ALLIES (2017-2020, chistera.eu, lium.univ-lemans.fr) propose, dans le cadre du thème Lifelong Learning for Intelligent Systems, de développer et évaluer des systèmes d'intelligence artificielle capables de s'auto-améliorer au fur et à mesure de leur utilisation, par eux-mêmes et par interaction avec l'humain utilisateur. Dans ce cadre, le LNE a deux rôles : - définir et assurer la mise en place des outils et protocoles d'évaluation de ces systèmes dans le cadre de la plateforme BEAT - organiser une évaluation ouverte et un workshop associé. Missions Les missions confiées s'articulent autour des responsabilités du LNE dans le projet. Ainsi, vous serez amené(e) à intervenir sur les sujets suivants : - Évaluation des systèmes : vous participerez à la validation et à l'analyse finale des métriques proposées par le LNE dans le cadre du projet. Des propositions d'évolution seront bienvenues et pourront être testées avec les systèmes développés. L'objectif est d'obtenir des métriques validées et utilisables pour l'évaluation ouverte. - Simulation des utilisateurs : l'évolution du système s'effectuant en interaction avec un utilisateur simulé, une analyse de l'état de cette simulation sera attendue pour en assurer la pertinence et proposer des pistes d'amélioration. - Organisation d'une évaluation ouverte : vous serez un acteur majeur de l'organisation d'une campagne ouverte internationale sur la thématique. Cette évaluation se fera sur la plateforme BEAT et un travail commun avec l'IDIAP devra être effectué pour s'assurer du bon fonctionnement global du projet. - Organisation d'un workshop de clôture : un workshop scientifique de clôture sera à organiser pour permettre des échanges scientifiques pertinents avec la communauté en conclusion de la campagne d'évaluation. Profil - Vous êtes titulaire d'un doctorat en informatique ou en sciences du langage, avec une spécialisation en traitement automatique de la parole ou du texte. - Une expérience en évaluation de systèmes serait un véritable atout. - Vous possédez de bonnes qualités rédactionnelles et relationnelles. - Vous disposez d'un bon niveau de programmation en Python et C++ - La connaissance de Linux est indispensable. - Vous êtes à l'aise en anglais tant à l'oral qu'à l'écrit (niveau permettant une communication professionnelle). Dans le cadre de ce post-doc, des déplacements très ponctuels en France (le Mans) et à l'étranger (Espagne, Suisse) sont à prévoir (4 / an environ). Postuler en ligne sur : https://www.lne.fr/fr/offre-emploi/post-doc-evaluation-systemes-evolutifs-locuteur-traduction