搜索全球AI产品动态

最近，Skywork AI 的研究团队推出了一种名为 SkyReels-A2的全新视频生成框架，标志着可控视频生成技术的新高度。这个名为 “元素到视频（E2V）” 的框架可以根据文本提示，将各种视觉元素(如角色、物体、背景)合成自然的视频，并且能够与参考图像保持高度一致。SkyReels-A2的核心在于其复杂的数据处理流程。研究团队设计了一条全面的数据构建管道，以生成包含提示、参考图像和视频的三元组，从而为模型训练提供数据支持。其生成过程通过两个分支进行:空间特征分支和语义特征分支。空

北京大学与快手AI团队合作，成功攻克了复杂视频生成的难题。他们提出了一种名为VideoTetris的新框架，能够像拼图一样轻松组合各种细节，生成高难度、指令复杂的视频。该框架在复杂视频生成任务中超越了Pika、Gen-2等商用模型。

["阿里发布肖像视频生成框架 EMO","EMO（Emote Portrait Alive）能够生成具有丰富面部表情和头部姿势的声音肖像视频","EMO技术优于现有的先进方法，如DreamTalk、Wav2Lip和SadTalker","EMO模型可能被用作犯罪工具"]