最近,来自字节跳动和上海科技大学的研究人员开发了一项名为 “HeadGAP” 的研究引起了大家的关注,研究团队提出了一种新的方法,可以仅通过三张目标人物不同视角的照片,快速创建出高仿真、可动画化的3D虚拟人头部形象,并且可以根据参考视频实现面部表情同步

研究团队展示了在真实场景下,如何通过少量数据实现个性化的头像创建。在这项研究中,研究者们首先进行了一个名为 “先验学习” 的阶段。在这个阶段,他们从一个大型的多视角动态数据集中提取了3D 头部的先验信息。这些先验信息能够帮助系统理解不同的头部特征和表现形式。接着,在 “头像创建” 阶段,研究者们利用这些先验信息进行个性化定制,生成目标人物的虚拟头像。

image.png

整个过程采用了一种基于高斯点云的自解码网络,结合了部分动态建模。通过这种方式,系统能够快速捕捉到每个个体的独特性,并在此基础上进行头像的个性化优化。团队还采用了一些技术手段,比如反演和微调策略,使得头像的个性化过程更加高效,最终成功实现了照片级别的渲染效果和多视角一致性。

在实验中,研究团队展示了他们的方法在不同场景下的表现,结果显示,无论是在控制环境下还是在真实环境中,生成的3D 头像都能保持很高的质量和稳定的动画效果。这一成果不仅在虚拟社交、游戏开发等领域有着广泛的应用前景,同时也为3D 头像的个性化制作提供了新的思路和方法。

产品入口:https://top.aibase.com/tool/headgap

划重点:

🎨 研究团队通过 “HeadGAP” 方法,仅需少量照片即可创建逼真的3D 头部虚拟形象。  

🚀 该方法采用高斯点网络和动态建模技术,实现头像个性化定制与优化。  

🖼️ 实验结果显示,生成的头像在渲染质量和动画表现上都非常出色,适用于多种应用场景。