deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 2014|回复: 24

分享一下炼丹经验

[复制链接]

15

主题

182

帖子

6092

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6092

万事如意节日勋章

 楼主| 发表于 2024-3-17 22:14:48 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 wzx945 于 2024-3-20 20:55 编辑

玩了DFL两个月了,尝试炼了几次丹,也走了一些弯路,这里写点我自己炼丹的经验。

首先,我的显卡是A卡7900XT,所以只能选择DX12版本的DFL炼丹。MVE版和ICE版都用不了(新版MVE似乎可以炼丹,但是合成时还有点毛病,没敢轻易尝试)。A卡在DFL上其实效率还可以,比玩SD强多了,效率损失很小,而且A卡同等级的卡比N卡显存要大一些,可以选择参数更高的丹,或者开更大的BS,总体来说玩DFL够了。

其次,是配套相关软件,这方面A卡十分弱势,几个关键的软件都不支持A卡,比如MVE和魔改切脸,但是这两个现在都有平替软件可以在论坛里找到,所以也算可以接受。



再次,是丹的四维选择。我一开始觉得224分辨率的丹分辨率太低,练出来的效果不太好保证,所以我一开始就练的320的丹,但现在攒灵石买了坛主的神丹炼了一次,才体会到低分辨率丹的好处。新手果然还是从低分辨率丹开始炼容易一些,高参数的丹BS开不了太高,导致炼丹的效率就低,新手一旦练错了,沉没的时间成本太高。


这次攒够了灵石买到了坛主的刘亦菲liae224的神丹,才知道神丹的效果。之前灵石不足,买过一些论坛里的便宜的丹,效果现在看来只能说差强人意,我以为丹也就能达到这个效果了,所以自己短时间练了几个丹,还觉得炼丹也没那么困难,见了神丹才知道自己肤浅了。强烈推荐新手攒灵石先买滚石大佬的224liae刘亦菲丹,才能知道神丹应该能达到的效果,也能少走不少弯路。

下面分享一下这次我在滚石大大的224liae刘亦菲丹的基础上自己炼丹的经验。
先看一下效果,分别是原视频,滚石刘亦菲丹,滚石热巴丹,和这次我自己炼的周也丹,都是相同融合参数
W20E50T50
竖屏对比1.jpg
W40E80T40
竖屏对比2.jpg

可以看出来,热巴丹的纹理比刘亦菲丹要强一些,但是经过我自己测试,虽然亦菲丹有牙齿脏的问题,但是一旦有遮挡物,刘亦菲丹的遮罩比热巴丹要强得多,毕竟炼的晚,遮罩大概升级了很多。

下面说一下我炼丹的过程,给大家一个参考,也欢迎大佬指出并纠正我的问题。(loss指源loss值,即倒数第二个数值)
【全程没开学习率,全程开梯度剪裁,总计用时不到7天】
1.开mask,开RW,开UY,BS32,跑了3w,loss值降到了0.20
2.开mask,开RW,开UY,BS32,开RCT/LCT,跑到5w,loss降到了0.23
3.开mask,开RW,开口眼,关UY,BS30,跑到20w,loss降到0.30
4.开mask,开RW,关口眼,开UY,BS32,跑到28w,loss降到0.14
5.关mask,开RW,关口眼,开UY,BS32,再跑1000,消除第2、4、5列图像中的马赛克和色斑
6.开mask,开RW,开UY,开RCT/LCT,BS32,跑到35w,loss降到0.13
7.开mask,开RW,开UY,跑到40w,BS32,loss降到0.103
8.开mask,关RW,关UY,跑到44w,BS32,loss降到0.085
【因为看到大佬说,关闭RW跑会导致越来越像DST,所以我在关闭RW之前,先把DST换成了SRC,后面就是SRC的对练】
9.开mask,关RW,关UY,开GAN=5.0,BS28,跑到46w,loss升到0.105(可以看到眉毛出现纹理)
10.开mask,关RW,关UY,开GAN=0.5,BS28,跑到47w,loss升到0.108(可以看到嘴唇出现少量纹理)
附上一些炼丹过程中的图
Screenshot 2024-03-12 012515.png
Screenshot 2024-03-14 130752.png
preview_SAEHD.jpg
preview_SAEHD.jpg
融合之后的效果我还是很满意的,开了超分之后轻松拿捏1080P的视频,眉毛和嘴唇的纹理很不错。但是224的丹还是不要用到4K的视频上,分辨率还是不够,换完之后很糊,超分也救不回来。




回复

使用道具 举报

40

主题

862

帖子

4690

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4690

万事如意节日勋章

发表于 2024-3-17 22:45:32 | 显示全部楼层
本帖最后由 pasanonic 于 2024-3-17 23:19 编辑

确实新手就该从低分辨率低参开始练手,毕竟别人的经验顺序不一定适合自己,他们也是慢慢一步步纠正来的,自己摸索一套合适自身的方法更加高效,高参的时间代价太久,影响自己的学习进度
我刚开始傻到练遮罩内都不会,直接全景开,都是loss5.0起步的脸,傻傻的跑几个星期,其实开遮罩内训练几天就OK了,玩模型先要搞清楚自己的选择,是要效果还是质量,这样你才好走下一步

兄弟 你也是A卡啊,握手,如果你在训练途中有自动随机重启的情况,可以把显存频率稍微调低一点,就好了,也省电降温,不知道是不是我体质问题


liae开这么高bs 延时这么低,真羡慕

送你一个礼物,https://dfldata.cc/forum.php?mod=viewthread&tid=9843,开了这个,你那模糊的侧脸就清晰了
回复 支持 反对

使用道具 举报

7

主题

185

帖子

1677

积分

初级丹圣

Rank: 8Rank: 8

积分
1677

万事如意节日勋章

发表于 2024-3-17 23:17:11 | 显示全部楼层
支持一波,感谢分享
回复 支持 反对

使用道具 举报

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27029

万事如意节日勋章

发表于 2024-3-17 23:40:10 | 显示全部楼层
本帖最后由 come3002 于 2024-3-17 23:43 编辑

感谢分享。非常详细的记录炼制的基本过程。附带了 详细的bs30,和降低的 loss 参数;成丹后,还做了 跟刘亦菲丹 1080p视频换脸对比测试体验。
很有价值,可以做复用坛主 刘亦菲liae 224 重要的参考。
回复 支持 反对

使用道具 举报

2

主题

41

帖子

535

积分

高级丹师

Rank: 5Rank: 5

积分
535

万事如意节日勋章

发表于 2024-3-18 00:12:21 | 显示全部楼层
谢谢分享,顺便问一下,SRC和DST都没有遮挡物,用了遮罩模型写入遮罩开了训练遮罩内的选项训练

训练出来的模型手放到脸上就会扭曲.没有遮挡效果

是不是SRC和DST的素材中要保留手指麦克风之类的遮挡物,训练好才会有遮挡?
回复 支持 反对

使用道具 举报

26

主题

217

帖子

2088

积分

初级丹圣

Rank: 8Rank: 8

积分
2088

万事如意节日勋章

发表于 2024-3-18 01:22:52 | 显示全部楼层
你的dst素材用的是什么素材?不知道刘亦菲之后,滚石老大出的又一个224吴彦祖让如何,是不是比刘亦菲的更神?同时感谢楼主的分享。
回复 支持 反对

使用道具 举报

26

主题

217

帖子

2088

积分

初级丹圣

Rank: 8Rank: 8

积分
2088

万事如意节日勋章

发表于 2024-3-18 01:24:03 | 显示全部楼层
roy777 发表于 2024-3-18 00:12
谢谢分享,顺便问一下,SRC和DST都没有遮挡物,用了遮罩模型写入遮罩开了训练遮罩内的选项训练

训练出来的模 ...

需要好的遮罩,大量的训练时间。
回复 支持 反对

使用道具 举报

14

主题

2944

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15961

真我风采勋章万事如意节日勋章

发表于 2024-3-18 07:38:21 | 显示全部楼层
道友终于悟了 可喜可贺!
回复 支持 反对

使用道具 举报

8

主题

73

帖子

9128

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
9128
发表于 2024-3-18 11:48:39 | 显示全部楼层
坛友思路很清晰,我也尝试一下后期把训练集换成src和src对练
回复 支持 反对

使用道具 举报

12

主题

284

帖子

7970

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7970

万事如意节日勋章

发表于 2024-3-18 13:57:29 | 显示全部楼层
对练这个就有问题。。谁告诉你要对练的
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-23 06:51 , Processed in 0.153094 second(s), 41 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表