SMPLX-Lite: معيار واقعي وقابل للقيادة للأفاتار مع هندسة غنية وتعليقات على الملمس

يعتبر استعادة الأفاتار الكامل للجسم بشكل فوتوغرافي وقابل للقيادة أمرًا حيويًا للعديد من التطبيقات، بما في ذلك الواقع الافتراضي، والألعاب ثلاثية الأبعاد، والتواجد عن بُعد. تتطلب معظم الطرق، سواء كانت إعادة بناء أو توليد، أعدادًا كبيرة من تسلسلات الحركة البشرية والشبكات الملمسة المقابلة. لتسهيل تعلم أفاتار قابل للقيادة، يعد وجود نموذج جسم براميترى مع طوبولوجيا موحدة أمرًا بالغ الأهمية. ومع ذلك، فإن مجموعات بيانات جسم الإنسان الحالية إما تحتوي على صور أو نماذج ملمسة وتفتقر إلى نماذج براميترية تناسب الملابس بشكل جيد. نقترح نموذجًا براميترى جديدًا SMPLX-Lite-D، الذي يمكنه التوافق مع الهندسة التفصيلية للشبكة الماسحة مع الحفاظ على هندسة مستقرة في مناطق الوجه واليدين والقدمين. نحن نقدم مجموعة بيانات SMPLX-Lite، وهي الأكثر شمولاً لمجموعات بيانات أفاتار الملابس مع تسلسلات RGB متعددة الزوايا، وتعليقات على النقاط الرئيسية، وشبكات ماسحة ملمسة، ونماذج SMPLX-Lite-D الملمسة. باستخدام مجموعة بيانات SMPLX-Lite، نقوم بتدريب نموذج ترميز تلقائي تبايني شرطي يأخذ وضع الإنسان ونقاط الوجه الرئيسية كمدخلات، ويولد أفاتار إنسان فوتوغرافي وقابل للقيادة.