3Dデジタルヒューマン分野において、南京大学、復旦大学、そしてファーウェイ・ノアの方舟研究所の研究チームは、多視点一貫性と感情表現力の不足という問題に対する革新的な解決策を提案しました。彼らは、校正された多視点ビデオ、感情ラベル、フレームごとの3D幾何学的情報を含むEmoTalk3Dデータセットを開発しました。研究チームは、「音声から幾何学、そして外観へ」というマッピングフレームワークを構築することにより、感情を制御可能な3Dの会話アバターを合成できる新しい手法を提案し、リップシンクとレンダリング品質を大幅に向上させました。データセットの構築について