deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 8133|回复: 138

【直播炼丹】纯女性320WF脸ICE木兰丹

[复制链接]

46

主题

755

帖子

7797

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7797

开心娱乐节日勋章

 楼主| 发表于 2023-9-21 10:25:12 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 jinyuan37 于 2024-1-31 16:38 编辑

一.前言:软件不允许分享,需要的自己想办法。
论坛上木兰丹太少,没有320的底丹,只能自己练一个了。
素材使用CelebA和FFHQ的纯女性素材+RTM补角度素材进行炼制。
预训练的时候将素材用resize.bat指令调整到320WF脸,同分辨率可以节约大量电费。
对于只换美女来说男脸老头脸什么的性价比太低,筛选CelebA的7W高清女性素材到4W,FFHQ高清纯女性素材到3W后进行训练。
训练过程将按照教授的木兰模型教程里的分组炼制法进行炼制,每组5000~10000张。
开这个帖子主要是督促下自己,以免中途放弃。
二.计划:
1.先练100W迭代,然后尝试转正进行测试。
2.由于之前F脸的丹素材处理上有点问题,遮罩用错了,所以炼到30W作废,现在重新炼制WF脸AE参数更高的。
3.炼制一颗专丹,视情况看看是否再添加素材训练。
三.模型三围:
   - AI算法: ICE-V7
   - 模型架构: df-murd
   - 脸部类型: Wf
   - 分辨率: 320
   - 自动编码器维度: 384(想要效果好,还是得把AE提升到分辨率以上)
   - 编码器维度: 92
   - 解码器维度: 74
   - 解码器掩码维度: 16(使用外部遮罩,这个数值可以降低到16)
四.训练设备:
2080ti
前期BS4训练20W迭代,然后BS8关闭遮罩约束训练5~10W。
然后分组训练将每组素材LOSS降低到0.2~0.3左右后换组。
五.模型说明:
1.ICE-V7适合大分辨率的模型,原本打算炼制F脸的丹,但是新版本512WF脸遮罩在F脸上会出错,最终重炼WF丹。
2.至于AE参数,之前320训练有点不理想,毕竟F脸训练面积大了1/3,提升下看看。
3.额外素材会单独开个分支进行训练,预训练目前只会使用CelebA、FFHQ和部分768分辨率RTM补角度的素材。
4.以前都是用底丹练专丹,第1次(勉强算第2次)预训练,欢迎大家指正。
六.训练过程:
1.从0开始(2023年10月7日)
0.png
2.挂机一晚上,五万多迭代(2023年10月8日)
58000.png
之前遮罩出错,结果练了30W迭代LOSS还是很高。这次总算是正常点了。
还是按照正规流程,先刷20W的低BS,这样有助于未来各种专丹快速成型,同时学习一些高BS学习不到的东西。
3.今晚挂完就20W迭代了,即将步入分组训练,不过在此之前会先关遮罩5W(2023年10月9日)
2.png
3.开始关闭遮罩训练,目前22W,感觉有些效果了(2023年10月10日)
22w.png
4.遮罩5W跑完,第一组1W素材,一晚上训练成果。(2023年10月12日)
QQ浏览器截图20231011072400.jpg 265000.jpg
从0.3LOSS下降到0.24,截图是开启rnda后的,继续训练看看。
5.Celeba的第一组效果不错,但其实颜色和复杂度都算是比较简单,换了组FFHQ训练,一晚上降的不多,继续挂一天看看(2023年10月12日)
300000.png
6.Celeba和FFHQ交替训练,看得出来还是FFHQ信息里足,Celeba和普通素材基本上都是秒降到0.3以下,目前都是16bs训练,最后一次性收尾的时候会大BS机器收敛一下。目前训练到43W预训练。图就不上了,都差不多,就是一组组循环(2023年10月16日)
7.2023年10月17日
46w.png
---------------------------------------------------------------------------
模型下载地址https://dfldata.cc/forum.php?mod ... &extra=page%3D1















回复

使用道具 举报

46

主题

755

帖子

7797

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7797

开心娱乐节日勋章

 楼主| 发表于 2023-9-21 16:04:10 | 显示全部楼层
关于BS极限值,以及模型优化器放在GPU和CPU,大家有什么经验吗?是不是和CPU有关?我用的CPU是12400f。
回复 支持 反对

使用道具 举报

2

主题

52

帖子

773

积分

高级丹师

Rank: 5Rank: 5

积分
773

万事如意节日勋章

发表于 2023-9-21 20:08:03 | 显示全部楼层
你什么CPU这么强?
回复 支持 反对

使用道具 举报

2

主题

52

帖子

773

积分

高级丹师

Rank: 5Rank: 5

积分
773

万事如意节日勋章

发表于 2023-9-21 20:15:33 | 显示全部楼层
我用1.31版练了两个直播丹,同样的素材与迭代次数,ice出来的光影不太理想就没有再用ice练,也不知道是不是我设置问题,ice也没有什么可设置参数。期待你木兰表现
回复 支持 反对

使用道具 举报

45

主题

507

帖子

3136

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3136
发表于 2023-9-22 00:20:01 | 显示全部楼层
jinyuan37 发表于 2023-9-21 16:04
关于BS极限值,以及模型优化器放在GPU和CPU,大家有什么经验吗?是不是和CPU有关?我用的CPU是12400f。 ...

连系统都不见了。模型谁还要。这不是搞笑吗
回复 支持 反对

使用道具 举报

46

主题

755

帖子

7797

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7797

开心娱乐节日勋章

 楼主| 发表于 2023-9-22 04:43:30 | 显示全部楼层
ccctttccct 发表于 2023-9-22 00:20
连系统都不见了。模型谁还要。这不是搞笑吗

额,模型练了主要是我自己用啊,又不缺灵石。论坛里想要的东西基本上都已经买了,而且有这软件的人多得是……
回复 支持 反对

使用道具 举报

46

主题

755

帖子

7797

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7797

开心娱乐节日勋章

 楼主| 发表于 2023-9-22 06:03:19 | 显示全部楼层
本帖最后由 jinyuan37 于 2023-9-22 15:03 编辑

训练到4.8W的时候发现一个错误,重新2.2W开始训练,早上基本等于白练。

回复 支持 反对

使用道具 举报

15

主题

1864

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23403

万事如意节日勋章

发表于 2023-9-22 07:38:42 | 显示全部楼层
jinyuan37 发表于 2023-9-22 06:03
3W迭代的图,基本上已经有影子了,LOSS在0.7左右。
第一组是最难练的,后面有了底子再练起来就简单了。
前 ...

跟楼主学习木兰版本
回复 支持 反对

使用道具 举报

46

主题

755

帖子

7797

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7797

开心娱乐节日勋章

 楼主| 发表于 2023-9-22 07:48:12 | 显示全部楼层
come3002 发表于 2023-9-22 07:38
跟楼主学习木兰版本

互相学习,还在摸索阶段,你的很多帖子我也都看了,受益匪浅。
回复 支持 反对

使用道具 举报

46

主题

755

帖子

7797

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7797

开心娱乐节日勋章

 楼主| 发表于 2023-9-22 10:14:08 | 显示全部楼层
东风 发表于 2023-9-21 20:15
我用1.31版练了两个直播丹,同样的素材与迭代次数,ice出来的光影不太理想就没有再用ice练,也不知道是不是 ...

ICE不是有光影进化吗
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-20 22:11 , Processed in 0.091452 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表