WildAvatar: Conjunto de datos de video en la naturaleza a escala web para la creación de avatares 3D

Los conjuntos de datos humanos existentes para la creación de avatares suelen estar limitados a entornos de laboratorio, donde se pueden proporcionar anotaciones de alta calidad (por ejemplo, estimación SMPL a partir de escaneos 3D o imágenes de múltiples vistas). Sin embargo, sus requisitos de anotación son poco prácticos para imágenes o videos del mundo real, lo que plantea desafíos para las aplicaciones del mundo real en los métodos actuales de creación de avatares. Con este fin, proponemos el conjunto de datos WildAvatar, un conjunto de datos de creación de avatares humanos en la naturaleza a escala web extraído de YouTube, con más de 10,000 diferentes sujetos humanos y escenas. WildAvatar es al menos 10 veces más rico que los conjuntos de datos anteriores para la creación de avatares humanos en 3D. Evaluamos varios métodos de creación de avatares de vanguardia en nuestro conjunto de datos, destacando los desafíos inexplorados en aplicaciones del mundo real sobre la creación de avatares. También demostramos el potencial de generalización de los métodos de creación de avatares, cuando se les proporciona datos a gran escala. Publicaremos públicamente nuestros enlaces a las fuentes de datos y anotaciones, para avanzar en la creación de avatares humanos 3D y otros campos relacionados para aplicaciones del mundo real.