近日,研究团队发布了一项新的图像超分辨率(SR)技术,该技术基于扩散反演(Diffusion Inversion),旨在通过充分利用大型预训练扩散模型中的图像先验信息,提升图像的分辨率和清晰度。这项研究由来自不同学术机构的三位学者共同完成,他们的目标是为图像超分辨率领域带来新的突破。

image.png

在这项技术中,研究者们设计了一种名为 “部分噪声预测”(Partial noise Prediction)的策略,该策略通过构建扩散模型的中间状态作为起始采样点。这一核心方法依赖于一个深度噪声预测器,该预测器能够为前向扩散过程提供最佳的噪声图。经过训练后,这个噪声预测器能够部分初始化采样过程,沿着扩散轨迹生成高分辨率的图像。

与现有的超分辨率方法相比,这项技术具有更加灵活和高效的采样机制,可以支持从一个到五个任意数量的采样步骤。值得注意的是,即使只使用一个采样步骤,这种新方法的表现也优于或与当前最先进的技术相当。

image.png

该研究团队还提供了详细的使用说明和训练指导,包括所需的软硬件环境、模型的下载链接以及如何在有限的 GPU 内存条件下运行程序。这些信息将帮助研究人员和开发者更好地使用该技术进行图像超分辨率的相关工作。

此外,研究团队还设立了在线演示平台,方便用户直观地体验这一创新技术,并且提供了用于验证研究结果的合成数据集及真实数据集链接。研究者们希望通过这项技术,能够为图像超分辨率的实际应用提供更高效、更清晰的解决方案。

image.png

项目入口:https://github.com/zsyOAOA/InvSR?tab=readme-ov-file

demo:https://huggingface.co/spaces/OAOA/InvSR

划重点:

🌟 这项新技术基于扩散反演,能够有效提升图像分辨率。  

🔍 采用 “部分噪声预测” 策略,灵活支持不同的采样步骤。  

💻 提供详尽的使用指南及在线演示,便于用户操作与体验。