deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 2888|回复: 9

GEM-邓紫棋-基于猫224df-d 专丹(原版可用)

[复制链接]

11

主题

95

帖子

2119

积分

初级丹圣

Rank: 8Rank: 8

积分
2119
 楼主| 发表于 2023-10-8 15:45:35 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:5  参与人数:1  我的评分:未评
本帖最后由 594938857 于 2023-10-9 11:27 编辑

在练这个丹的时候有蛮多想法的,之前练了一次100W的256,发现许多问题,优化后决定用猫之224小试牛刀。

此丹是基于猫之汉化224底丹ICE版本使用已转化为普通丹,原版DFL请下载对应版本
全程开启参数:
遮罩约束训练范围:之前试过不开启,会出现很多问题,就不一一赘述了
均衡侧脸训练权重
素材增强-颜色转换器: lct
真脸应用强度: 0.01
梯度剪裁: 由于许多切脸来自MV,不可避免少部分切脸的光影、头发会比较复杂,全程开启也是避免炸丹。

使用素材:
DST:1. FFHQ全角度512分辨率7万张素材已按性别+人种归档 选用亚洲女性
         2.【3D牙齿图集(带精确遮罩)】3000张,F1024,多角度多表情 由于GME下牙齿并不好看,所以我发现所有视频GEM在避免露出下牙,因此选取尽可能露出下牙部分 分别加入 DST\SRC 进行训练
         3.DST全角度训练图集V3.1 WF512【2.6W张 6GB 】 选取多角度训练,极端角度仍然具有空间
SRC:
         1.邓紫棋_wf 1024 4K  这个是基础,但由于经验不足,里面许多切脸无法达到现在的需求,所以在此版本上加入了2000张近景4K,并剔除了绝大部分面部不够清晰、牙齿不够清晰的切脸(发现有坛友去购买,已上传最新版)
         2.【3D牙齿图集(带精确遮罩)】3000张,F1024,多角度多表情 由于GME下牙齿并不好看,所以我发现所有视频GEM在避免露出下牙,因此选取尽可能露出下牙部分 分别加入 DST\SRC 进行训练

说一下不足的地方吧,牙齿虽然想了不少办法,但是可能由于GAN的次数不足,还是难以达到足够清晰的效果。(也可能是因为我想保留GEM的上牙,导致所选牙齿图集比较局限)
训练流程
第一阶段:
BS :4 ,开启随机扭曲 15万左右
第二阶段:
BS :4 ,开启随机扭曲,开启学习率衰减 15万左右
第三阶段:
BS :24,关闭随机扭曲,开启眼嘴优先 ,random color 0.05 15万左右 (这个阶段加入了牙齿图集,开随机颜色也是为了补充光影)
第四阶段:
BS :24 GAN:0.1 25万左右


_____________________  模型摘要  ______________________
                                                   
模型名称:: 猫之汉化224df-d 4G可用_SAEHD
                                                   
当前迭代: 705172
                                                   
_____________________  模型参数  ______________________
                                                   
  模型架构: df-d
  人脸类型: wf
  模型分辨率: 224
  自动编码器维度 ae_dims: 192
  编码器维度 e_dims: 48
  解码器维度 d_dims: 48
  解码器掩码维度 d_mask_dims: 16
  BS大小: 24
  学习率lr: 5e-05
  瘦化神经网络 lr_dropout: 开启
  loss平滑: 开启
  loss平滑强度: 5
  遮罩约束训练范围: 开启
  均衡侧脸训练权重: 开启
  素材增强-颜色转换器: lct
  GAN生成纹理细节强度: 0.1
  GAN 结构识别器维度: 36
  GAN 生成器的维度: 16
  真脸应用强度: 0.01
  RG优化器: 开启
  信仰优化器 adabelief: 开启
  模型优化器放置于GPU: 开启
  梯度剪裁: 开启
  自动备份时间: 2
  版本: V3

aaa.png
aaaa.png
bbb.png
ccc.png

以下是0训练合成效果:
111.png
uuuu.png
推荐合成参数
W      50左右
E       100左右
C       根据效果自行选择吧
PS:请勿用于任何违法行为,下载即同意!!
欢迎大佬进行讨论,指出不足之处,

回复

使用道具 举报

0

主题

161

帖子

2085

积分

初级丹圣

Rank: 8Rank: 8

积分
2085

万事如意节日勋章

发表于 2023-10-8 20:13:35 | 显示全部楼层
感觉好像src 妆容太浓了吧
回复 支持 反对

使用道具 举报

11

主题

95

帖子

2119

积分

初级丹圣

Rank: 8Rank: 8

积分
2119
 楼主| 发表于 2023-10-8 20:22:03 | 显示全部楼层
本帖最后由 594938857 于 2023-10-8 21:06 编辑
xionger 发表于 2023-10-8 20:13
感觉好像src 妆容太浓了吧

  换一下遮罩 和色彩模式 E稍微拉高一些,颜色不对是你合成参数没调好。
回复 支持 反对

使用道具 举报

5

主题

193

帖子

1425

积分

初级丹圣

Rank: 8Rank: 8

积分
1425

万事如意节日勋章

发表于 2023-10-9 08:10:15 | 显示全部楼层
回复一下支持新模型
回复 支持 反对

使用道具 举报

2

主题

19

帖子

-9万

积分

禁止访问

积分
-99984
发表于 2023-10-9 10:48:17 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

0

主题

10

帖子

132

积分

高级丹童

Rank: 2

积分
132
发表于 2023-10-9 15:34:40 | 显示全部楼层
支持一下
回复

使用道具 举报

0

主题

85

帖子

750

积分

高级丹师

Rank: 5Rank: 5

积分
750

万事如意节日勋章

发表于 2023-10-10 09:28:49 | 显示全部楼层
谢谢分享
回复

使用道具 举报

6

主题

215

帖子

1433

积分

初级丹圣

Rank: 8Rank: 8

积分
1433
发表于 2023-10-16 16:59:06 | 显示全部楼层
嘿福內 那酸案懂人
回复 支持 反对

使用道具 举报

14

主题

352

帖子

3807

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3807

万事如意节日勋章

发表于 2023-10-22 10:14:39 | 显示全部楼层
192的AE实在太低了,适合小显卡用吧。
回复 支持 反对

使用道具 举报

11

主题

95

帖子

2119

积分

初级丹圣

Rank: 8Rank: 8

积分
2119
 楼主| 发表于 2023-10-22 12:23:53 | 显示全部楼层
DFLive 发表于 2023-10-22 10:14
192的AE实在太低了,适合小显卡用吧。

低参丹 4g就可用
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-13 03:55 , Processed in 0.089413 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表