Adaptation linguistique des modèles téléphoniques multilingues pour des tâches de reconnaissance vocale indépendantes du vocabulaire

Cet article présente nos nouveaux résultats sur la modélisation téléphonique multilingue et l'adaptation dans une nouvelle langue cible qui n'est pas incluse dans les modèles multilingues entraînés. Les expériences ont été réalisées avec les bases de données SpeechDat(M) et MacroPhone, incluant les langues française, allemande, italienne, portugaise, espagnole et anglaise américaine. Tout d'abord, nous avons construit des modèles téléphoniques dépendants de la langue et multilingues. Le taux de reconnaissance pour une tâche de mot isolé a diminué en moyenne de seulement 3,2 % en utilisant 95 modèles multilingues au lieu de 232 modèles dépendants de la langue. Deuxièmement, nous avons étudié des techniques d'adaptation pour le transfert inter-langues et avons montré que seulement 100 énonciations d'une nouvelle langue étaient nécessaires pour l'adaptation. En utilisant l'algorithme MAP, le taux de reconnaissance a été amélioré de 79,9 % à 84,3 %. Enfin, nous avons défini une mesure de dissimilarité phonétique entre 2 langues et comparé les modèles dépendants de la langue et multilingues dans le but du transfert inter-langues.