最近,清华系的生数科技推出了一项令人兴奋的功能,任何人只需一张图片,就能轻松生成各种背景的视频,仿佛拥有了 “视频魔法”。
这项功能就是 “主体参照”功能,它的最大亮点在于,可以让视频中的任何主体 —— 无论是人、动物,还是虚构角色,都能在不同场景中保持一致的形象。
主要特色如下:
支持单一角色的面容、半身、全身的一致可控
如需重点保持主体面容一致,需仅截取单一主体的清晰面容图
如需重点保持主体半身一致(面容+上半身服饰),仅需截取单一主体的清晰半身图
如需重点保持主体全身一致(全身特征),仅需截取单一主体的清晰全身图
生数科技的 CEO 唐家渝表示,传统的视频生成方式往往会因为细节不够稳定而让内容崩坏,而这项新技术则为创作者提供了更多的自由度和控制力。
比如AIbase想让之前生成的一个小女孩的图片,换一个场景,就可以点击参考生视频选项,上传图片并选择主体,然后简单描述一下场景:
例如:
小女孩戴着头盔在天空遨游
然后就生成了这样的视频:
如果你只想参考人物的长相,不想参考服装等特征,那么,在选择主体的时候,只需要框选头部即可。
然后,AIbase通过简单的描述,轻松地将小女孩放在了草地上。除了最后手举起来有点崩了以外,整体的效果已经十分惊艳。
当然,这个功能用于真人、宠物图像,更是不在话下。比如,拿一张美女的照片,你只需简单描述背景,就可以生成下面这样生动的视频:
除了人物、动漫角色、宠物以外,Vidu的主体参照还支持商品。这里AIbase拿之前生成的钻石戒指的图片测试一下:
整体运镜还是挺连贯的,就是有点模糊了,如果加上一些专业的提示词,效果应该会更好。
需要注意的是,这项功能目前仅支持单一主体的生成。如果你的图片中有多个人物或物体,系统会要求你框选出一个主体进行处理。这样,尽管不能同时处理多个对象,但可以确保每个主体在视频中的表现都能保持一致。
感兴趣的点此体验:https://top.aibase.com/tool/vidu