为啥总是训练不到高清？

dfllearner · 发表于 2023-5-19 23:39:05

星级打分

1
2
3
4
5

平均分:NAN 参与人数:0 我的评分:未评

288分辨率的模型，512 的src和dst

这些步骤都按教程一一做了
开learning rate drop
关randome warp
GAN 开0.1

loss rate在0.12左右就几乎不动了。合成后的脸看起来也就是DVD的清晰度，一看就和原视频的高清1080p差很远

教程上说256的模型都能训练到高清，我差了哪几步？

come3002 · 发表于 2023-5-20 08:18:23

本帖最后由 come3002 于 2023-5-20 08:34 编辑

dfllearner 发表于 2023-5-20 03:30
用了别人的一百万的底丹，那还得再跑一百万？

288分辨率的模型，512 的src和dst
===================
楼主，dfl 软件出的清晰度依赖于显卡显存、model 大小、SRC、DST 图片质量、底丹神丹、按照坛主步骤的训练程度等等
其结果取决于最低的那块板而不是最高那块板。
想提高清晰度。建议改一下思路。
1、花大价钱钱升级显卡，改用更大model
2、花小钱，购买五彩320等更高的神丹底丹。
3、花时间，换更好的 SRC、DST
......等等方法

我用的是第三套方法：将 SRC、DST 的WF512vs WF512
变成 WF1024 Vs WF1024. 发现有很大提升。
参数与步骤：

1、显卡4-8G
2、model底丹：自闭2.0 256 320 88 66 22
3、SRC、DST ：4K 电视剧切割无刘海 WF1024 质量100%（为了更高清晰度，不建议用默认的90%）
4、训练：我没有WF1024DST。就用古力 SRC WF1024 既做SRC也做 DST 按坛主的步骤对炼 30w迭代，还没有gan。
5、及时进行随机的 DST 零训练直接合成检测（1080p或4K 中近景）。并用下载论坛的更高的model 比如448丹做对比
当90%的图片很接近或很满意。这个丹就可以用了。
若清晰度上来了。表情不够就补表情，仰角等大角度不够就补大角度。
反正没有gan，可以随便补。

比如这个古力的 4K高码率 无刘海 视频片段人脸高度占视频1/2切 WF 1024 质量100%起步
（图片尺寸3840x2160）红线就是切脸位置。

00001 2.jpg

删除模糊图片。保留清晰图片

自闭2.0 为底丹。对炼时候，肉眼观察。 30w迭代

360截图20230413082516806.jpg

检测1080p 樱花国中近景 DST（WF768 质量100% 无清晰化）
零训练直接合成发现上下齿缝可见。几乎跟原版无差别

古力 30w.jpg

下载论坛其他的model 专丹做对比（原版为樱花国不方便露面）。
256（dfud 256 329 88 66 22）Vs448（448dfud 448 512 88 88 28）
零训练直接合成对比看着很接近。
90%的图片比较满意，就可以用了。
古力 256 Toyer 448 对比。.jpg

如果要看炼的专丹的清晰度极限，就做4K 中近景检测
4K 3840x2160 高码率电视剧切 WF1536 质量100% （为了清晰度不要选默认90%）
零训练直接合成
256vs448都能看到牙齿齿缝和嘴唇纹理，看着很接近。

放大，继续对比细节。448 嘴唇纹理等细节好于256.

最后将原始人物拿来做对比
4K 中近景 WF1536
原始＞448＞256.

256 448 原图.png

结论：花点时间 256model，SRC DST WF1024vs WF1024 。做1080p，中近景（WF768） 基本上够用。
（做4K 中近景还是有些吃力）

丸丸 · 发表于 2023-5-20 03:15:33

bs8，迭代数200w先跑完再说

dfllearner · 发表于 2023-5-20 03:30:03

丸丸发表于 2023-5-20 03:15
bs8，迭代数200w先跑完再说

用了别人的一百万的底丹，那还得再跑一百万？

zzmmg · 发表于 2023-5-20 10:32:41

本帖最后由 zzmmg 于 2023-5-20 11:09 编辑

come3002 发表于 2023-5-20 08:18
288分辨率的模型，512 的src和dst
===================
楼主，dfl 软件出的清晰度依赖于显卡显存、model ...

你这不是一个回复，而是一个高级教程。受教了

文中提到 “反正没有gan，可以随便补”，我想知道能不能补和有没有GAN过有什么关系，能给我说说么？

dfllearner · 发表于 2023-5-20 11:09:58

come3002 发表于 2023-5-20 08:18
288分辨率的模型，512 的src和dst
===================
楼主，dfl 软件出的清晰度依赖于显卡显存、model ...

太感谢了

ndhaib84661 · 发表于 2023-5-20 18:29:35

come3002 发表于 2023-5-20 08:18
288分辨率的模型，512 的src和dst
===================
楼主，dfl 软件出的清晰度依赖于显卡显存、model ...

大佬，经常看到你的回复，但是您说的自闭2.0底丹在论坛里搜索不到了，能不能重新分享一下？

爱的风筝线 · 发表于 2023-5-20 23:14:52

come3002 发表于 2023-5-20 08:18
288分辨率的模型，512 的src和dst
===================
楼主，dfl 软件出的清晰度依赖于显卡显存、model ...

我自己做出来的啥也不是，看着就难受，要是能做到你这样的，我就心满意足了，可以指点一下吗？V：lj6285685566

		自动登录	找回密码
密码			立即注册（仅限QQ邮箱）

为啥总是训练不到高清？

万事如意节日勋章