关于底丹神丹的困惑，求大神们指点

mjy9921130

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

请教一下，我找了几个底丹，训练的时候次数会自动清零的。但这个底丹已经开了学习率下降，是不是泛化能力没那么好？还有些底丹居然是gan过的，这些底丹是不是质量都不高？好的底丹是不是都没开学习率，没开gan的？我这个丹，不改参数成像很快，但后期收敛不了，loss越来越高，皮肤质感出不来。还有我gan过头了，合成时脸上偶尔出现红斑，还有救吗？跌了快200w，有点舍不得。

dfl9999

lrd不是降低你的学习率，是正则化策略，主要有两个作用，一是随机学习率为0，帮助模型逃离鞍点，二是随机屏蔽模型的神经元，强制让模型学习通过不同策略而非固定惯性策略进行学习和输出，从而增加模型的泛化能力，开了之后会损失一半以上的训练效率，但是训练质量会有所提升，进行面部精细细节学习的时候需要开启，不能在随机扭曲之前开。

dfl9999

合成或者训练阶段出现斑点，说明模型拟合了素材中的噪声，比如你的遮罩在遮物体的时候总漏一截出来，数量达到一定比例会被模型当成面部的一部分学进去，但是因为是遮挡物而非正常面部特征，所以就会在正常面部固定区域出现阴影和噪点，解决办法就是观察你的遮罩然后改过来。

模型一旦拟合噪声就不可逆，只能回滚备份，但是因为噪声可能长期存在容易被忽略，可能很难找到还原点。

还有个原因就是错误的训练步骤，比如你拿别人开了lrd或者gan的丹过来练，你又开了扭曲或者其他参数，会导致模型的面部数据损坏。

dfl9999

尽量拿别人的预训练丹来练，这样你就可以从扭曲开始，开了正训的丹会开各种参数，数据已经固定了，你换了素材就等于洗丹，浪费时间

mjy9921130

dfl9999 发表于 2025-2-16 20:10
尽量拿别人的预训练丹来练，这样你就可以从扭曲开始，开了正训的丹会开各种参数，数据已经固定了，你换了素 ...

我在其他论坛上买了五彩的384底单，他的参数是开了学习率的，也不知道这个丹到底是不是五彩的，训练时提示是五彩的。我用着个丹，换成我自己的src，用CelebA+FFHQ女性WF512做dst，练我自己的万能模型，是否也要从扭曲开始练？第一步开扭曲，关学习率？第二步开扭曲，开学习率？第三步gan？

dfl9999

mjy9921130 发表于 2025-2-16 20:21
我在其他论坛上买了五彩的384底单，他的参数是开了学习率的，也不知道这个丹到底是不是五彩的，训练时提 ...

不开扭曲你练啥丹，换了素材不扭曲就是废丹，lrd也可以先关了然后开扭曲再正常按步骤练，就是效率不会恢复

dfl9999

mjy9921130 发表于 2025-2-16 20:21
我在其他论坛上买了五彩的384底单，他的参数是开了学习率的，也不知道这个丹到底是不是五彩的，训练时提 ...

花钱你也基本上买不到好丹，不是懂深度学习原理的一律都是通过试错经验在摸瞎，偶尔能出好丹也被人买断了不会摆出来到处卖

mzh920

dfl9999 发表于 2025-2-16 19:52
lrd不是降低你的学习率，是正则化策略，主要有两个作用，一是随机学习率为0，帮助模型逃离鞍点，二是随机屏 ...

厉害

wangdaye

mjy9921130 发表于 2025-2-16 20:21
我在其他论坛上买了五彩的384底单，他的参数是开了学习率的，也不知道这个丹到底是不是五彩的，训练时提 ...

从理论上来说 练万能复用底丹还是不开学习率好点。 我有个底丹开了学习率练的练了很久  后面关了学习率，扭曲用大量新素材洗了很久，都没恢复到没开学习率阶段，备份的复用学新的快！虽然用也是可以的  要是要求不高随便玩玩其实用也是可以的！追求极致就别开学习率练底丹！

pasanonic

wangdaye 发表于 2025-2-16 23:20
从理论上来说 练万能复用底丹还是不开学习率好点。 我有个底丹开了学习率练的练了很久  后面关了学习率， ...

开了学习率的复用丹最多只用一次   换新素材脸部很容易花