Redes de auto-coincidencia con puerta para la comprensión de lectura y respuesta a preguntas

En este artículo, presentamos las redes de auto-coincidencia con puerta para el estilo de respuesta a preguntas de comprensión de lectura, que tiene como objetivo responder preguntas a partir de un pasaje dado. Primero, emparejamos la pregunta y el pasaje con redes recurrentes basadas en atención con puerta para obtener la representación del pasaje consciente de la pregunta. Luego, proponemos un mecanismo de atención de auto-coincidencia para refinar la representación emparejando el pasaje consigo mismo, lo que codifica efectivamente la información de todo el pasaje. Finalmente, empleamos redes de puntero para localizar las posiciones de las respuestas en los pasajes. Realizamos extensos experimentos en el conjunto de datos SQuAD. El modelo único logra un 71.3% en las métricas de evaluación de coincidencia exacta en el conjunto de prueba oculto, mientras que el modelo de conjunto impulsa aún más los resultados al 75.9%. En el momento de la entrega del artículo, nuestro modelo ocupa el primer lugar en la tabla de clasificación de SQuAD tanto para el modelo único como para el de conjunto.