在这个图像越来越重要的时代,有一个能够生成超高分辨率图像的模型,简直就是设计师和创作者的福音。UltraPixel,正是这样一个黑科技。
首先,它支持直接生成1K到6K分辨率的图片。想象一下,随便一张图,都能精细到毛孔,清晰到纤毫。演示图片更是离谱,细节补充得毫无违和感,看得人瞠目结舌。
UltraPixel的秘密在于它基于Stable cascade进行的训练和微调,并且即将开源,大家都能亲自体验一下这份科技的魅力。
这个模型在去噪的后期阶段,通过低分辨率图像中的丰富语义信息,来指导高分辨率图像的生成。换句话说,就是把复杂的事情变简单了,大大降低了生成高分辨率图像的复杂性。
此外,它提出了隐式神经表示,用于连续上采样,并引入了适应不同分辨率的尺度感知归一化层。这些技术手段的运用,使得图像在低分辨率到高分辨率的处理过程中,保持了高度的细节和真实感。
更令人惊叹的是,无论是低分辨率还是高分辨率的处理,都是在最小空间内进行的。两个过程共享大部分参数,高分辨率输出所需的额外参数不到3%。这意味着,UltraPixel不仅能生成超高分辨率的图片,还极大地提高了训练和推理的效率。