deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 7097|回复: 39

[ComfyUI-SUPIR]目前最强图片修复超越StableSR-更新V2.2024.4.5+Tile

[复制链接]

9

主题

145

帖子

3459

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3459

荣誉会员勋章小有贡献勋章

 楼主| 发表于 2024-3-2 00:23:19 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 vancheap 于 2024-4-5 21:11 编辑

SUPIR:https://github.com/Fanghua-Yu/SUPIR
ComfyUI-SUPIR:https://github.com/kijai/ComfyUI-SUPIR
安装
要么从 git 管理器和安装,要么克隆此存储库以custom_nodes并运行:
pip install -r requirements.txt
或者,如果您使用可移植(在 ComfyUI_windows_portable -folder 中运行此命令):
python_embeded\python.exe -m pip install -r ComfyUI\custom_nodes\ComfyUI-SUPIR\requirements.txt
此外,目前似乎有必要,一种安全的方法(通常是 Windows 上的问题)来安装/更新它:xformers
pip install -U xformers --no-dependencies(用于便携式python_embeded\python.exe -m pip install -U xformers --no-dependencies )
从下面的原始链接中获取 SUPIR 模型,它们是从普通的 -folder 加载的 此外,您还需要一个 SDXL 模型,它们从同一文件夹加载。ComfyUI/models/checkpoints
我没有将 llava 包含在其中,但您可以向节点输入任何标题,从而使用任何您想要生成它们的东西,或者只是不生成它们,即使没有似乎也能很好地工作。
内存要求与输入图像分辨率直接相关,节点中的“scale_by”只是缩放输入,您可以将其保留为 1.0,并使用任何其他节点调整输入大小。在我的测试中,我能够使用 10GB 3080 GPU 运行 512x512 到 1024x1024,并在 24GB GPU 上运行其他测试,最高可达 3072x3072。系统RAM要求也很高,不知道数字,但我猜32GB以下会有问题,用64GB测试。

警告:目前下载10GB剪辑模型,因为我还没有找到使用现有模型的方法

下载站长的ComfyUI整合包:https://dfldata.cc/forum.php?mod ... 7402&extra=page%3D1
ComfyUI-SUPIR放在custom_nodes
SUPIR-v0Q.ckpt放在models\checkpoints\SUPIR
SUPIR-v0F.ckpt放在models\checkpoints\SUPIR

20240302000311.png 20240303011509.png

ComfyUI-SUPIR更新:ComfyUI-SUPIR-baa5b28---2024.3.3
模型更新:RealVisXL_V4.0LightningBakedvae---注意不能太多步,模型太强会加斑点
工作流更新:SUPIR_1024修复,牙齿几乎没有崩,只需要不到20秒----更改模型,减少步数,改进关键词
2024.3.3
----------------------------------------------------------------------------------------------------------------------------------------------------------------
无标题.jpg
ComfyUI-SUPIR更新:ComfyUI-SUPIR-2d1ecb1---2024.3.12: 作者已修复放大倍率错误
Updates:
fp8 seems to work fine for the unet, I was able to do 512p to 2048 with under 10GB VRAM used. For the VAE it seems to cause artifacts, I recommend using tiled_vae instead.
CLIP models are no longer needed separately, instead they are loaded from your selected SDXL checkpoint
更新:
fp8似乎可以很好地为unet工作,我能够做512 p到2048与低于10GB的VRAM使用。 对于VAE,它似乎会导致伪影,我建议使用tiled_vae。
CLIP模型不再需要单独使用,而是从您选择的SDXL检查点加载

注:脸图不建议打开fp8,DPMPP2M对有些图片的毛发会变得很粗,不过咱们也用不到毛发,DFM效果差一些,但是毛发很细腻
模型更新:Juggernaut_RunDiffusionPhoto2_Lightning_4Steps---这个模型牙齿有很大提升
工作流更新:SUPIR_768_1.5x_2CFG_12STEPS_DPMPP2M----减少步数全缩放为768只需10-12步,注意不能太多步,模型太强会加斑点,改进关键词,CFG根据皮肤质感自行调整

建议用ps批量去杂色,强度根据皮肤质感,去杂色大概40%,处理后比较自然,也能去掉一些莫名其妙的色斑点。
2024.3.12
---------------------------------------------------------------------------------------------------------------------------------------------
SUPIR官方WINDOWS版本 https://dfldata.cc/forum.php?mod=viewthread&tid=17844
由于不再需要clip模型,可以移到windows版本里面去,玩玩官方版本
---------------------------------------------------------------------------------------------------------------------------------------------
ComfyUI-SUPIR V2  ComfyUI-SUPIR-e933093 最新2024.3.24 其实就是把V1进行了拆分,作者也保留了V1,测试下来没有多大的区别,主要是前面加了一级降噪
添加juggernautXL_v9Rundiffusionphoto2.safetensors 至少需要40步
添加leosamsHelloworldXL_helloworldXL50GPT4V.safetensors  至少需要40步 ,感觉牙齿比juggernautXL_v9好一点点
ComfyUI-SUPIR V2 工作流作者已经提供
新提供一个工作流(一个兄弟的建议)StableSR+SUPIR_V1_V1.0.json 研究了一下把第一级降噪用StableSR替代,仍然使用ComfyUI-SUPIR V1

网盘进行了整理,分开目录放置
2024.3.24
---------------------------------------------------------------------------------------------------------------------------------------------
ComfyUI-SUPIR V2 ComfyUI-SUPIR-d20c519 最新2024.4.5
添加leosamsHelloworldXL_hw50EulerALightning.safetensors 至少10步左右 CFG小于3
新提供一个工作流workflow_ultimate_upscale_simple.json  Controlnet Tile真实放大,可作为ComfyUI-SUPIR的一级的处理,五官有微小的形变,但是似乎非常模糊的图瑕疵没有了,自行测试吧
模型:网盘/Controlnet/TTPLANET_Controlnet_Tile_realistic_v1_fp16.safetensors  放置在ComfyUI路径/models/Controlnet目录

2024.4.5






评分

参与人数 2贡献 +2 收起 理由
xiviv + 1 十分给力!
bbking2018 + 1 非常牛!

查看全部评分

回复

使用道具 举报

216

主题

1998

帖子

68万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
687502

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

发表于 2024-3-2 20:34:53 | 显示全部楼层
看了下comfyui插件作者做的测试,512*512的图放大到1024*1024需要10GB显存,显存的占用尚能接受,就看计算速度了。如果太慢的话,那其实对于DFL高清人脸图的使用场景就不太实用了
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 1 反对 0

使用道具 举报

9

主题

145

帖子

3459

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3459

荣誉会员勋章小有贡献勋章

 楼主| 发表于 2024-3-2 00:53:31 | 显示全部楼层
本帖最后由 vancheap 于 2024-3-2 12:39 编辑

--img_dir                Input folder. 输入文件夹。
--save_dir               Output folder.输出文件夹。
--upscale                Upsampling ratio of given inputs. Default: 1 给定输入的上采样率。 默认值:1
--SUPIR_sign             Model selection. Default: 'Q'; Options: ['F', 'Q'] 型号选择。 默认值:“Q”; 选项:['F', 'Q']
--seed                   Random seed. Default: 1234 随机种子。 默认值:1234
--min_size               Minimum resolution of output images. Default: 1024 输出图像的最小分辨率。 默认值:1024
--edm_steps              Numb of steps for EDM Sampling Scheduler. Default: 50 EDM 采样调度程序的步骤数。 默认值:50
--s_stage1               Control Strength of Stage1. Default: -1 (negative means invalid) 控制 Stage1 的强度。 默认值:-1(负数表示无效)
--s_churn                Original hy-param of EDM. Default: 5 EDM 的原始 hy-param。 默认值:5
--s_noise                Original hy-param of EDM. Default: 1.003 EDM 的原始 hy-param。 默认值:1.003
--s_cfg                  Classifier-free guidance scale for prompts. Default: 7.5 提示的无分类器指导量表。 默认值:7.5
--s_stage2               Control Strength of Stage2. Default: 1.0 控制 Stage2 的强度。 默认值:1.0
--num_samples            Number of samples for each input. Default: 1 每个输入的样本数。 默认值:1
--a_prompt               Additive positive prompt for all inputs.  所有输入的附加肯定提示。
    Default: 'Cinematic, High Contrast, highly detailed, taken using a Canon EOS R camera,  默认值:“电影、高对比度、高度细节,使用佳能 EOS R 相机拍摄,
    hyper detailed photo - realistic maximum detail, 32k, Color Grading, ultra HD, extreme 超详细照片 - 逼真的最大细节、32k、颜色分级、超高清、极致
     meticulous detailing, skin pore detailing, hyper sharpness, perfect without deformations.' 细节细致,皮肤毛孔细节,超锐利,完美不变形。
--n_prompt               Fixed negative prompt for all inputs.  修复了所有输入的否定提示。
    Default: 'painting, oil painting, illustration, drawing, art, sketch, oil painting,  默认:'绘画、油画、插图、素描、艺术、素描、油画
    cartoon, CG Style, 3D render, unreal engine, blurring, dirty, messy, worst quality, 卡通,CG风格,3D渲染,虚幻引擎,模糊,肮脏,凌乱,质量最差,
    low quality, frames, watermark, signature, jpeg artifacts, deformed, lowres, over-smooth' 低质量、帧、水印、签名、jpeg 伪影、变形、低分辨率、过度平滑”
--color_fix_type         Color Fixing Type. Default: 'Wavelet'; Options: ['None', 'AdaIn', 'Wavelet'] 颜色固定类型。 默认值:“小波”; 选项:['无'、'AdaIn'、'小波']
--linear_CFG             Linearly (with sigma) increase CFG from 'spt_linear_CFG' to s_cfg. Default: False 将 CFG 从“spt_linear_CFG”增加到 s_cfg。 默认值:假
--linear_s_stage2        Linearly (with sigma) increase s_stage2 from 'spt_linear_s_stage2' to s_stage2. Default: False
--spt_linear_CFG         Start point of linearly increasing CFG. Default: 1.0 CFG 线性增加CFG的起点。 默认值:1.0
--spt_linear_s_stage2    Start point of linearly increasing s_stage2. Default: 0.0 线性增加 s_stage2 的起点。 默认值:0.0
--ae_dtype               Inference data type of AutoEncoder. Default: 'bf16'; Options: ['fp32', 'bf16'] AutoEncoder 的推理数据类型。 默认值:'bf16'; 选项:['fp32','bf16']
--diff_dtype             Inference data type of Diffusion. Default: 'fp16'; Options: ['fp32', 'fp16', 'bf16'] 扩散的推断数据类型。 默认值:'fp16'; 选项:['fp32'、'fp16'、'bf16']
回复 支持 反对

使用道具 举报

0

主题

35

帖子

233

积分

初级丹师

Rank: 3Rank: 3

积分
233
QQ
发表于 2024-3-2 10:31:15 | 显示全部楼层
不够傻瓜不用
回复 支持 反对

使用道具 举报

9

主题

145

帖子

3459

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3459

荣誉会员勋章小有贡献勋章

 楼主| 发表于 2024-3-2 12:44:47 | 显示全部楼层

这个取决于workflows,改成批量就可以了
回复 支持 反对

使用道具 举报

10

主题

320

帖子

3094

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3094

万事如意节日勋章

发表于 2024-3-2 13:27:28 | 显示全部楼层
买了,这个模型也放一个吧:realisticVision_xl_V20
回复 支持 反对

使用道具 举报

7

主题

185

帖子

1672

积分

初级丹圣

Rank: 8Rank: 8

积分
1672

万事如意节日勋章

发表于 2024-3-2 13:35:31 | 显示全部楼层
牛逼,学习
回复

使用道具 举报

40

主题

477

帖子

5310

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5310
发表于 2024-3-2 15:27:59 | 显示全部楼层
好麻烦,期待出傻瓜版
回复 支持 反对

使用道具 举报

9

主题

145

帖子

3459

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3459

荣誉会员勋章小有贡献勋章

 楼主| 发表于 2024-3-2 17:56:04 | 显示全部楼层
zqszhuce 发表于 2024-3-2 13:27
买了,这个模型也放一个吧:realisticVision_xl_V20

传了
回复 支持 反对

使用道具 举报

216

主题

1998

帖子

68万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
687502

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

发表于 2024-3-2 19:35:14 | 显示全部楼层
处理速度快不快?看图片效果很不错
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-21 23:34 , Processed in 0.148164 second(s), 44 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表