Benchmark UMPM: Um conjunto de dados multi-pessoa com dados de vídeo sincronizados e captura de movimento para avaliação do movimento e interação articulada do ser humano

Analisar o movimento humano, incluindo rastreamento e estimativa de pose, é um tópico importante em visão computacional. Muitos métodos foram desenvolvidos no passado e serão desenvolvidos no futuro. Para ter uma avaliação sistemática e quantitativa de tais métodos, dados de verdade proveniente do movimento humano 3D são scientificamente necessários. Existem alguns conjuntos de dados disponíveis publicamente, como o HumanEva, que fornecem sequências de vídeo sincronizadas com dados 3D de verdade detalhados para cenas limitadas a uma única pessoa. No entanto, para múltiplas pessoas, tal conjunto de dados atualmente não existe. Neste artigo, apresentamos o benchmark Utrecht Multi-Person Motion (UMPM), que inclui dados de captura de movimento sincronizados e sequências de vídeo a partir de múltiplos ângulos para o movimento de múltiplas pessoas, incluindo interação entre várias pessoas. O conjunto de dados está disponível para a comunidade de pesquisa para promover a pesquisa na análise do movimento articulado do ser humano em múltiplas pessoas. Este artigo descreve o design do benchmark, as soluções para problemas técnicos e os conjuntos de dados resultantes.