EMDB: 전세계 3D 인간 자세와 형태의 전자기 데이터베이스

우리는 EMDB, 전세계 3D 인간 자세와 형태의 전자기 데이터베이스를 소개합니다. EMDB는 야외 비디오를 위한 전세계 신체 및 카메라 경로와 함께 고품질 3D SMPL 자세 및 형태 매개변수를 포함하는 새로운 데이터셋입니다. 우리는 신체 착용형 무선 전자기(EM) 센서와 손에 들고 있는 아이폰을 사용하여 총 58분의 모션 데이터를 기록하였으며, 이는 81개의 실내 및 실외 시퀀스와 10명의 참가자에 걸쳐 분포되어 있습니다. 정확한 신체 자세와 형태와 함께, 우리는 또한 전세계 카메라 자세와 신체 루트 경로를 제공합니다. EMDB를 구축하기 위해, 우리는 먼저 6-DoF EM 측정값에 SMPL을 맞추고, 그 후 이미지 관찰을 통해 자세를 정제하는 다단계 최적화 절차를 제안합니다. 고품질 결과를 달성하기 위해, 우리는 복잡한 인간 표면 기하학과 외관을 재구성하기 위해 신경 암시적 아바타 모델을 활용하여 밀집된 픽셀 수준의 목표를 통해 향상된 정렬과 부드러움을 가능하게 합니다. 다각도 체적 캡처 시스템으로 수행한 평가에서 EMDB는 예상 정확도가 2.3 cm 위치 오차와 10.6도 각도 오차를 보이며, 이전의 야외 데이터셋의 정확도를 초과합니다. 우리는 EMDB에서 카메라 상대 및 전세계 자세 추정을 위한 기존의 최첨단 단안 RGB 방법을 평가합니다. EMDB는 https://ait.ethz.ch/emdb 에서 공개적으로 이용 가능합니다.