SUPIR

关注
义项:AI图像超分辨率工具

SUPIR(Scaling-UP Image Restoration)是一种面向真实场景图像修复的AI超分辨率方法,由董超团队提出,相关论文于2024年被CVPR接受[1]。它以Stable Diffusion XL为基础,通过扩大模型规模并引入文本提示,对低质量照片进行放大与细节复原,也被封装为ComfyUI插件供本地使用。

百科 图文
目录
  1. 定义
  2. 原理
  3. 发展历程
  4. 应用
  5. 局限
  6. 参见

定义

SUPIR是Scaling-UP Image Restoration的缩写,是一种基于扩散模型的真实场景图像修复与超分辨率方法,全称意为“放大规模以实现卓越效果”[1]。它由方华宇、顾津锦、董超等人提出,作者来自中国科学院深圳先进技术研究院、上海人工智能实验室、悉尼大学、香港理工大学、腾讯ARC实验室和香港中文大学等机构[2]。

该方法的处理对象是画面模糊、噪声明显或受压缩损伤的低质量图像,目标是在放大分辨率的同时恢复出接近真实照片的观感[3]。项目公开了SUPIR-v0Q与SUPIR-v0F两个权重版本,并声明仅供非商业用途。

原理

SUPIR以Stable Diffusion XL的Base模型作为生成先验。作者认为该模型可直接生成高分辨率图像,参数能更多用于提升画质而非解读文本,因此适合承担修复任务[4]。

为使预训练编码器能处理受损图像,SUPIR对编码器进行微调,使其对退化更稳健,避免把压缩伪影误认成画面内容。其损失函数可写作 $\mathcal{L}_{\mathcal{E}}=\|\mathcal{D}(\mathcal{E}_{\mathrm{dr}}(x_{LQ}))-\mathcal{D}(\mathcal{E}_{\mathrm{dr}}(x_{GT}))\|_{2}^{2}$[5]。

在控制环节,SUPIR借鉴ControlNet的高层结构并采用网络剪枝,构建了体量适配SDXL的适配器,用于识别低质量图像内容并在像素层面约束生成[5]。采样阶段使用EDM调度,并加入修复引导采样,以缓解生成式修复中常见的保真度下降问题[5]。

从流程上看,扩散模型在隐空间中逐步去噪,适配器同时接收低质量图像与文本条件;文本提示可指定远处模糊物体的清晰化方式、物体材质等,负向提示则用于抑制伪影[3]。

发展历程

2024年1月,相关论文《Scaling Up to Excellence: Practicing Model Scaling for Photo-Realistic Image Restoration In the Wild》在arXiv公开。同年6月,该论文被CVPR 2024收录,页码为25669至25680[1]。

开源代码发布后,社区围绕其开发了ComfyUI封装插件。该插件将原先的单一节点拆分为多个节点,并扩展了硬件支持、模型加载效率与采样器选项。此后SUPIR被合并进ComfyUI核心代码库,插件转为维护状态,同时也出现了修剪后的safetensors格式模型[6]。

围绕推理速度,后续研究提出了免训练的时间—空间感知采样策略,在不额外训练的前提下减少去噪步数,进一步提升高频纹理的恢复效果[7]。

应用

SUPIR主要用于旧照片翻新、低分辨率素材放大和AI生成图像的细节增强,可处理照片中的脸部与背景区域[8]。插件版本还支持按帧处理视频序列,实现视频帧的超分辨率[9]。

在使用形态上,SUPIR既可作为ComfyUI中的工作流节点调用,也可通过命令行脚本或图形界面进行批量处理,并可通过服务化接口对外提供图像修复能力[10]。有设计研究将SUPIR作为高保真度代表模型,与侧重真实感和侧重速度的超分辨率模型进行对比,用于评估其在球鞋可视化等设计流程中的效果[11]。

局限

SUPIR对硬件要求较高。原作者说明其运行需要约60GB内存与2块30GB显存的显卡,因此曾推迟在线演示的发布[2]。显存占用与输入图像分辨率直接相关,可通过分块VAE等方式缓解。

作为生成式方法,SUPIR在客观保真指标上并不占优。论文数据显示,其在无参考指标上表现最好,但在PSNR、SSIM等全参考指标上存在劣势,作者因此对这类指标的评价价值提出质疑[4]。其生成能力强也带来风险,若不加约束可能改变原图内容或结构,需要依靠修复引导采样与提示控制来抑制[5]。

社区使用反馈还指出,SUPIR输出可能带有过度平滑的磨皮观感,对皮肤细节要求较高的场景并不理想;调用方通过更换底模或引入分块处理来减轻这一现象[12]。此外,项目声明限定非商业使用,商用需另行获得许可。

在推理成本方面,原始SUPIR需要较多的去噪步数,虽有加速采样策略将步数降至约7步,但相关方法仍处于研究阶段[7]。

参见

  • Stable Diffusion —— SUPIR所依托的扩散生成模型系列,其SDXL版本是SUPIR的生成先验。

  • ComfyUI —— 提供节点式界面的图像生成工具,SUPIR已集成进其核心代码库。

  • 超分辨率 —— SUPIR所属的图像处理任务类别,指将低分辨率图像恢复为高分辨率图像。

  • 扩散模型 —— SUPIR进行去噪生成的模型类型。

  • ControlNet —— SUPIR适配器设计所借鉴的生成控制结构。

  • CVPR —— SUPIR论文发表并收录的学术会议。

参考资料

  1. thecvf.com 上的网页 . thecvf.com [引用日期2026-10-04]
  2. README . huggingface.co [引用日期2026-10-04]
  3. ieee.org 上的网页 . ieee.org [引用日期2026-10-04]
  4. thecvf.com 上的 PDF 文件 . thecvf.com [引用日期2026-10-04]
  5. arxiv.org 上的网页 . arxiv.org [引用日期2026-10-04]
  6. ComfyUI-SUPIR . github.com [引用日期2026-10-04]
  7. ijcai.org 上的 PDF 文件 . ijcai.org [引用日期2026-10-04]
  8. github.com 上的网页 . github.com [引用日期2026-10-04]
  9. 首页 > AI产品库 > ComfyUI-SUPIR . pconline.com.cn [引用日期2026-10-04]
  10. Supir Photo-Realistic Image Restoration API Documentation . segmind.com [引用日期2026-10-04]
  11. ieee.org 上的网页 . ieee.org [引用日期2026-10-04]
  12. chuckchen/supir-v0q – Replicate . replicate.com [引用日期2026-10-04]
词条评价
词条统计

浏览次数:1 次

阅读量:0 次 · 阅读完成量:0 次

最近更新:2026-10-03T18:19:13Z

历史版本

完成率 = 阅读完成量 ÷ 阅读量,分母是阅读量不是浏览次数 —— 关了 JS 的、秒退的都在浏览次数里、不在阅读量里。 详细口径在后台的「数据统计」页。

本条目引用的词条
Stable Diffusion ComfyUI Stable Diffusion ComfyUI 超分辨率 扩散模型 ControlNet CVPR
红色的还不存在。红链不是错误——它标出"这个概念被引用了但还没人写"。