deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: Lau9

【回帖奖灵石】只删除inter_AB不删inter_B?

  [复制链接]

78

主题

1523

帖子

7883

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7883

万事如意节日勋章

发表于 2023-11-17 21:59:50 | 显示全部楼层

回帖奖励 +2 灵石

到了一定迭代数,应该不需要关参数再继续练,直接覆盖了
回复 支持 反对

使用道具 举报

4

主题

91

帖子

639

积分

高级丹师

Rank: 5Rank: 5

积分
639
发表于 2023-11-17 21:26:46 | 显示全部楼层

     谢谢回复~就是继续训练下去慢慢的模型会自己遗忘掉删掉的DST的细节?
     我再补充下我问题的详情,就是我训练专丹的DST素材里加了金鱼的补充角度的训练集,现在迭代一百多万了在跑gan,我通过合成预览了之后发现有点油画感(gan之前、之后都是一样),我有点怀疑可能是金鱼训练集的人脸是3d模型不是真正人脸导致的,所以想删掉金鱼数据集再训练看看会不会改善。那么在这个前提下我删掉后是继续现有参数训练呢,还是关闭gan、开启扭曲训练一段时间?抑或是重头快速的过一遍专训流程?
     烦请大佬不吝解答,谢谢~~~
回复 支持 反对

使用道具 举报

2

主题

56

帖子

3839

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3839

万事如意节日勋章

发表于 2023-11-17 19:51:10 | 显示全部楼层
459717439 发表于 2023-11-17 19:26
我有个问题,已经到Gan阶段,如果部分DST不想要了删掉后,需要重头开始再训一遍吗 ...

不需要
回复 支持 反对

使用道具 举报

2

主题

56

帖子

3839

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3839

万事如意节日勋章

发表于 2023-11-17 19:47:30 | 显示全部楼层

回帖奖励 +2 灵石

本帖最后由 ricemilk456 于 2023-11-17 20:05 编辑


=============更正一下=============

刚刚回去看了一下代码,发现确实不开RW就不会更新interAB的权重,不过也不知道为啥作者要这样设定,哈哈哈。
下面是代码:
螢幕擷取畫面 2023-11-17 200406.jpg

===============================
1. 只要训练,AB都会自己生成,不管有没有开RW。
删除AB之后相当于SRC的部分要重新训练,重新训练第一个步骤都会先开RW,所以那篇文章说的也没错。
2. 没错。
梯度裁剪是将梯度限制在一个范围内防止模型因为一次更新太大的梯度而炸掉,关闭的话的确会更快速的训练,但是也有炸丹的风险。
lr_dropout是每经过一定的训练后降低模型的学习率,当然会越学越慢,只有在模型快要训练完成loss不再降低时才需要开。
回复 支持 2 反对 0

使用道具 举报

3

主题

173

帖子

2767

积分

初级丹圣

Rank: 8Rank: 8

积分
2767

万事如意节日勋章

发表于 2023-11-17 19:31:58 | 显示全部楼层

回帖奖励 +2 灵石

我没删过唉,也没开过GAN
回复 支持 反对

使用道具 举报

4

主题

91

帖子

639

积分

高级丹师

Rank: 5Rank: 5

积分
639
发表于 2023-11-17 19:26:20 | 显示全部楼层

回帖奖励 +2 灵石

我有个问题,已经到Gan阶段,如果部分DST不想要了删掉后,需要重头开始再训一遍吗
回复 支持 反对

使用道具 举报

0

主题

21

帖子

126

积分

高级丹童

Rank: 2

积分
126

万事如意节日勋章稀奇古怪节日勋章

发表于 2023-11-17 18:13:26 | 显示全部楼层

回帖奖励 +2 灵石

大佬学习一下
回复 支持 反对

使用道具 举报

63

主题

452

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15019

万事如意节日勋章

 楼主| 发表于 2023-11-17 17:40:19 | 显示全部楼层
黑羽毛 发表于 2023-11-17 17:27
我现在也还是没有搞明白什么时候删AB,什么时候不删 太难了

答案3 的言外之意就是:你专丹SRC如果换人了,要删AB
回复 支持 1 反对 0

使用道具 举报

8

主题

119

帖子

632

积分

高级丹师

Rank: 5Rank: 5

积分
632

万事如意节日勋章

发表于 2023-11-17 17:28:00 | 显示全部楼层
学习,希望有大佬能指点迷津
回复 支持 反对

使用道具 举报

4

主题

78

帖子

894

积分

高级丹师

Rank: 5Rank: 5

积分
894

万事如意节日勋章

发表于 2023-11-17 17:27:42 | 显示全部楼层
我现在也还是没有搞明白什么时候删AB,什么时候不删 太难了
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-28 01:40 , Processed in 0.110303 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表