浅谈DF架构换脸原理，新人少走点弯路

狗蛋

xunlian 发表于 2025-3-13 09:41
SCR-SCR方法可以在后期使用。单SCR和DST训练后期，可以采取SCR-SCR适当训练一段时间。此方法好处可以加速 ...

liae架构的使用这种方法可行吗

xunlian

狗蛋 发表于 2025-3-13 16:00
liae架构的使用这种方法可行吗

DF架构：共享编码器 分离解码器，好比有2个医生给一个病人会诊，2个医生会分别的进行病情推理，根据2个医生的推理，意见综合在一起，逐渐推向正确的方向。
LIAE架构：共享编码器 共享解码器 只有一个医生。好比你上午找他，下午找的又是他。接待你的都是一个医生。


LIAE解码器共享，SCR-SCR其实意义不大，非要说有什么作用的话，无非原来1分钟学习1个单词，变成1分钟学习2个单词，LIAE架构就好比稳扎稳打一步一个脚印。

freellxd

可以不用预训练，直接DST和SRC分别投入几万张不同的人脸，按正常步骤训练就行。差不多了然后DST和SRC对调，再训练一波就差不多了

xunlian

freellxd 发表于 2025-3-14 00:11
可以不用预训练，直接DST和SRC分别投入几万张不同的人脸，按正常步骤训练就行。差不多了然后DST和SRC对调， ...

对于DF架构 你这样练 就污染了SCR解码器。

冷死的e

马一下

freellxd

xunlian 发表于 2025-3-14 10:19
对于DF架构 你这样练 就污染了SCR解码器。

效果好就行

yzc281

楼主的意思是不建议使用预训练底丹来训练专丹，而是直接从零开始单SRC多DST训练专丹？

yzc281

xunlian 发表于 2025-3-13 09:41
SCR-SCR方法可以在后期使用。单SCR和DST训练后期，可以采取SCR-SCR适当训练一段时间。此方法好处可以加速 ...

这里的SRC-SRC是指 单人SRC-单人SRC，而前述“Q2：现在预训练方法基本是SCR-SCR（SCR和DST放入同样素材）”指的是 多人SRC-多人SRC 对吧。程序自带的真预训练和正训中的伪预训练，实际上都是 多人SRC-多人SRC，不知道我理解的正确吗，新人求教

xunlian

yzc281 发表于 2025-3-18 16:45
这里的SRC-SRC是指 单人SRC-单人SRC，而前述“Q2：现在预训练方法基本是SCR-SCR（SCR和DST放入同样素材） ...

很多人的预训练阶段在SCR和DST放入同样的素材（多SCR和多DST）

我回复中的SCR-SCR是指在单SCR和多DST时训练时，需要SCR细小特征（痣），暂时移出DST，把SCR放入DST中。此方法需要在后期使用

yzc281

xunlian 发表于 2025-3-18 16:57
很多人的预训练阶段在SCR和DST放入同样的素材（多SCR和多DST）

我回复中的SCR-SCR是指在单SCR和多DST时 ...

后期是指和GAN同时训练？还是GAN后再练一段