Filtrado de pseudo-referencias mediante paráfrasis para la evaluación automática de la traducción automática

En este documento, presentamos nuestra participación en la Tarea Compartida de Métricas WMT 2019. Proponemos un método para filtrar pseudo-referencias mediante paráfrasis para la evaluación automática de la traducción automática (MT). Utilizamos las salidas de sistemas de MT estándar como pseudo-referencias filtradas por paráfrasis además de una única referencia humana (referencia de oro). Usamos BERT ajustado con un corpus de paráfrasis para filtrar pseudo-referencias verificando la paráfrasis con la referencia de oro. Nuestros resultados experimentales de los conjuntos de datos WMT 2016 y 2017 muestran que nuestro método logró una mayor correlación con la evaluación humana que las líneas base de BLEU de oraciones (Sent-BLEU) con una sola referencia y con pseudo-referencias no filtradas.