Un sistema de reconocimiento de emociones rápido y robusto para datos de teléfonos móviles del mundo real

Reconocer las emociones de un usuario mientras interactúa con dispositivos inteligentes como tabletas y teléfonos móviles es un problema prospectivo de visión por computadora. Se utilizan en una variedad de aplicaciones como navegación web, reproducción de contenido multimedia, juegos, etc., que involucran interacciones humanas. Presentamos un marco de reconocimiento de emociones que analiza las expresiones faciales de un usuario de teléfono móvil, bajo diversos desafíos de datos móviles del mundo real, como variaciones en la iluminación, posición de la cabeza, expresión, movimiento del usuario/dispositivo y complejidad computacional. El sistema propuesto incluye: (i) Algoritmo de seguimiento de puntos faciales personalizado para adaptarse a los datos capturados por móviles; (ii) Filtro temporal que preselecciona los marcos emocionales probables de la secuencia de entrada para un procesamiento posterior, con el fin de reducir la carga de procesamiento; (iii) Registro facial y selección de región de operación para una representación compacta de las unidades de acción facial (AU); (iv) Descripción de características discriminativas de las AUs que es robusta a cambios de iluminación y ángulos faciales; y (v) Clasificación de AUs y mapeo inteligente de las AUs predichas a emociones objetivo. Comparamos el rendimiento del sistema ER propuesto con las técnicas clave del estado del arte y mostramos una mejora significativa en bases de datos de referencia como CK+, ISL, FACS, JAFFE, MultiPie, MindReading, y también en nuestro conjunto de datos recopilados internamente de teléfonos móviles.