تحريك الوجه المدفوع بالكلام التعبيري

توليد حركة الوجه المدفوعة بالكلام هو موضوع بحث تم استكشافه جيدًا. ومع ذلك، تم القيام بقليل من العمل لنمذجة السلوك البصري التعبيري أثناء الكلام. نحن نتناول هذه المشكلة باستخدام نهج التعلم الآلي الذي يعتمد على قاعدة بيانات من حركات الوجه عالية الدقة المتعلقة بالكلام. من مجموعة التدريب هذه، نستخلص نموذجًا توليديًا لحركة الوجه التعبيرية التي تضم التحكم في المشاعر، مع الحفاظ على مطابقة دقيقة لحركة الشفاه. يمكن تحديد المحتوى العاطفي للكلام المدخل يدويًا بواسطة المستخدم أو استخراجه تلقائيًا من إشارة الصوت باستخدام مصنف آلة الدعم الشعاعي.