src怎么练都像dst，求帮助！

menglue

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

求帮助啊！384 416 512，哪个模型练到0.4左右就开始像dst了，骨骼，四官，保留不住src原有特征！大bs，小bs，高学率，低学率，IR_dropout,放弃率从0.2 0.3 0.4 0.5都试过，梯度裁剪0.5 0.6 0.7 0.8 ，开噪音等都试过，就是不行！！谁能帮助下！!!我云服务器现在两张A100在跑，16 32bs都试过，感觉4bs效果好一点！，所以现在一直开着4跑！

zsgdfl2023

扭曲时间一定要长，占比在整个训练时长80%左右，后期练细节要开真脸 0.0001-0.001左右，学习率要降低，好的底丹可以一直开扭曲出效果。

pasanonic

正训,关扭曲后,想要保持比较长久的定型,前期你要大量扭曲,模型AE尽量选择大的
扭曲的时候学习率设置5e-05,后面关闭扭曲期间学习率递减
脸型是决定的关键,扭曲和嘴眼的定位方式不同,难以精准把控,关扭曲后嘴眼尽量开久一点,还有src和dst素材的配比
反正就是很麻烦

xunlian

为什么训练到后期 反而越来越像DST？
单SRC多DST 专丹情况
不管是LIAE和DF，都是共用编码器。SRC和DST的特征，编码器都会学习到，然后反作用到各解码器。虽然DF解码器分离，但是长时间训练DST的特征进入SRC解码器后，自然就换脸出DST了。当然，这只是一个辅因，重要原因是SRC-DST的映射已经出现了拟合，由于是多DST，SRC和部分DST拟合，未拟合的DST，进入SRC解码器后，自然生成DST，这就解释了为何反而越训练，越像DST。

训练初始阶段
当输入多个DST时，此时SRC和DST之间 还是全局特征匹配（脸型轮廓 角度等），此时DST和SRC都能匹配上。
训练越来越久
此时SRC和DST之间 就不是简单全局特征了，肤色 眼神等高级语义也开始匹配了，此时很多DST就会过滤掉了。过滤掉的DST由于无法产生映射，自然就换不出SRC的脸。



总结：DST越多，我SRC只会映射其中最接近SRC的，其余的PASS。

DST越多，练的越久，反而越绝望。

xunlian

deepfacelab设计初衷1换1，然而现在为了一劳永逸，搞出了所谓专丹。本身就违背了原始初衷。

wangdaye

这个根本解决不了  src脸型五官 学成dst的 脸型都变了肯定不像  

menglue

wangdaye 发表于 2025-6-5 03:25
这个根本解决不了  src脸型五官 学成dst的 脸型都变了肯定不像

脸型变，理解！四官是在的啊！！骨像应该是变不了啊！！我看过没过拟合的，反正说不出来那种感觉

yxyao

df丹容易因为某些选项的开启时间不合适，导致这种情况，其实解决很简单：
删掉inter文件和opt文件。具体原理请参考随风大佬的技术贴：https://dfldata.cc/forum.php?mod=viewthread&tid=12662

但是注意，删掉inter和opt相当于删掉了训练成果，所以最好先备份。或者直接重新练。
如果想保留目前的迭代或训练成果，那基本无解，因为映射已经建立了，不明白的话还是去看上面贴的链接。

menglue

yxyao 发表于 2025-6-5 08:03
df丹容易因为某些选项的开启时间不合适，导致这种情况，其实解决很简单：
删掉inter文件和opt文件。具体原 ...

删掉也要练，在练的过程还不是要过拟合！！我就在想，该怎么练，我想着要不先用和src脸型差不多的素材，先练出效果，基本定型以后，再添加大量其他素材接着练！但是不知道先练的过程会不会也过拟合,哎

menglue

menglue 发表于 2025-6-5 11:55
删掉也要练，在练的过程还不是要过拟合！！我就在想，该怎么练，我想着要不先用和src脸型差不多的素材， ...

或者用最愚蠢的办法，src对练，练出效果再说！