MunchSonic: Seguimiento de Acciones Dietéticas Detalladas a Través de Sensado Acústico Activo en Gafas

Introducimos MunchSonic, un sistema de sensado acústico activo potenciado por IA integrado en gafas, diseñado para rastrear acciones dietéticas detalladas como los movimientos de mano a boca para la ingestión de alimentos, masticar y beber. MunchSonic emite ondas ultrasónicas inaudibles desde un marco de gafas convencional. Las señales reflejadas contienen información rica sobre la posición y los movimientos de diversas partes del cuerpo, incluyendo la boca, la mandíbula, los brazos y las manos, todas las cuales están involucradas en actividades de alimentación. Estas señales son procesadas luego por un pipeline de aprendizaje profundo personalizado para clasificar seis acciones: ingestión de alimentos, masticar, beber, hablar, tocar la cara con la mano y otras actividades (nulo). En un estudio con usuarios sin restricciones con 12 participantes, MunchSonic logra un 93.5% en la puntuación F1 macro en una evaluación independiente del usuario con una resolución de tiempo de 2 segundos, demostrando su efectividad. Además, MunchSonic rastrea con precisión los episodios de alimentación y la frecuencia de la ingesta de alimentos dentro de esos episodios.