表現豊かな音声駆動の顔のアニメーション

音声駆動の顔の動作合成は、広く研究されているテーマです。しかし、音声中の表現豊かな視覚行動をモデル化するための研究はほとんど行われていません。この問題に対処するために、音声関連の高忠実度の顔の動作のデータベースに依存した機械学習アプローチを使用します。このトレーニングセットから、感情制御を組み込みながら正確な口と音をシンクロさせる表現豊かな顔の動作の生成モデルを導出します。入力音声の感情的内容は、ユーザーによって手動で指定されるか、サポートベクターマシン分類器を使用して音声信号から自動的に抽出されます。