是否还在感叹视频制作门槛高,后期编辑太烧脑?别担心,阿里通义Wan团队再次出手,推出了他们最新的重量级模型All-in-One视频生成和编辑模型——VACE。
VACE最引人注目的能力之一,便是其强大的按条件生成视频功能。这意味着,你只需要用文字描绘出心中的场景,VACE就能迅速将你的想象变为现实。这如同拥有了一支听你指挥的梦幻摄制组,效率之高令人惊叹!
VACE支持多种灵活高效的编辑方式,包括:
- 物体运动轨迹任你掌控。借助 Move-Anything 功能,你可以精确控制视频中任何物体的运动轨迹。无论是想让飞鸟划出优美的弧线,还是让汽车按照指定的路线行驶,VACE都能轻松实现。
- 视频主体一键替换。 Swap-Anything 功能让你能够随心所欲地替换视频中的主体。想让纪录片里的猎豹变成一只憨态可掬的熊猫?想让广告片的主角瞬间改头换面?VACE都能帮你实现“乾坤大挪移”。
- 参考主体风格迁移。通过 Reference-Anything 功能,VACE可以学习并应用你提供的参考对象的风格到视频主体上。无论是想让实拍视频拥有动漫的质感,还是让普通人秒变艺术画作主角,都不在话下。
- 视频画面智能扩展。 Expand-Anything 功能可以智能地扩展视频的画面内容。再也不用担心拍摄角度受限,VACE能帮你把“窄”变“宽”,让视野更开阔。
- 静态画面赋予动态生命。 Animate-Anything 功能能够让静态的图像动起来。无论是老照片还是艺术画作,都能在VACE的魔法下焕发新的生机。
老片新生,VACE的视频修复术也有一手
值得一提的是,VACE在视频重渲染方面也展现了不俗的实力。它支持内容保留、结构保留、主体保留、姿态保留和运动保留等多种模式。这意味着,即使是画面模糊、细节丢失的老旧视频,也能在VACE的修复下重现光彩,仿佛时光倒流一般。
阿里通义Wan团队的VACE模型,凭借其在视频生成和编辑方面的强大功能,无疑将极大地提升视频创作的效率和趣味性。它就像一位无所不能的视频魔术师,能够满足用户各种天马行空的创意。
虽然目前模型还未正式上线,但将会开源,VACE的到来将为视频内容创作领域带来一场深刻的变革。
论文链接:https://arxiv.org/pdf/2503.07598
开源代码:https://ali-vilab.github.io/VACE-Page/