2025年2月14日,昆仑万维集团正式推出Matrix-Zero世界模型,标志着中国在空间智能领域迈出了重要一步。Matrix-Zero包含两款子模型:3D场景生成大模型和可交互视频生成大模型,旨在通过AI技术重塑数字内容创作模式,推动影视制作、游戏开发、具身智能等行业的创新发展。
Matrix-Zero的3D场景生成大模型能够将用户输入的图片转化为可自由探索的真实3D场景,支持不同风格的图片输入和风格迁移,并具备动态场景生成能力。该模型通过场景布局生成模块和纹理生成模块,结合可微渲染和扩散模型技术,确保生成的3D场景全局一致、动态合理,为3D游戏建模和具身智能模拟场景搭建提供了高效解决方案。例如,输入一张“城堡的花园一角”图片,模型可生成360度环视后场景保持不变的3D场景,并支持用户进行长距离、大范围的自由探索。
与此同时,Matrix-Zero的可交互视频生成大模型以用户输入为核心驱动,结合先进的生成式视频模型和自主研发的用户交互模块,实现了视频内容中视角移动的精确控制。用户可以通过键盘或鼠标输入,控制视频中的视角和运动轨迹,实现前后左右移动以及视角变换等操作。该模型包含离散运动控制模块、连续视角控制模块、3D场景位置追踪模块和滑动窗口机制,确保交互体验的流畅性和连贯性。
昆仑万维作为中国AI领域的领军企业,始终致力于实现通用人工智能,并通过自主研发不断推出创新的AI产品。Matrix-Zero的推出不仅是公司在空间智能领域的重大突破,也是其AI业务矩阵的重要补充。过去三年,昆仑万维在视觉多模态、深度学习等关键技术方向取得了显著成果,并构建了包括天工AI搜索、Mureka音乐创作平台、SkyReels短剧平台等在内的完整AI矩阵。
Matrix-Zero预计将于4月份正式上线,届时将为昆仑万维的AI游戏生产、AI短剧制作等业务带来新的赋能,为用户和开发者提供全新的平台和工具。