AI生成3D模型迎来了一项新技术 ——CharacterGen,可以从单张图片快速生成3D 角色。

该技术采用了一个高效的生成流程和一个基于图像的多视角扩散模型。CharacterGen可以有效地将输入姿势校准到规范形式,同时保留输入图像的关键属性,从而解决了多样化姿势所带来的挑战。

image.png

产品入口:https://top.aibase.com/tool/charactergen

此外,CharacterGen还采用了一种基于变换器的可推广的稀疏视图重建模型,可以从多视角图像中创建详细的3D 模型。最后,采用纹理反投影策略生成高质量的纹理贴图。

研究人员还创建了一个动漫角色数据集,用于训练和评估该模型。经过定量和定性实验的全面评估,该方法显示出在生成高质量形状和纹理的3D 角色方面的熟练程度,可以用于后续的应用,如绑定和动画制作。该技术的代码、数据集和预训练权重即将发布。

划重点:

- 🌟 CharacterGen 技术可以从单张图片快速生成3D 角色,采用了高效的生成流程和基于图像的多视角扩散模型。

- 🌟 该技术采用了一种基于变换器的可推广的稀疏视图重建模型,可以从多视角图像中创建详细的3D 模型。

- 🌟 研究人员创建了一个动漫角色数据集,用于训练和评估该模型,经过全面评估,该方法显示出在生成高质量形状和纹理的3D 角色方面的熟练程度。