专丹及换脸的新练法

wtxx8888

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:5  参与人数:2  我的评分:未评

现在的专丹练法，即一份SRC与DST万人包对练，实际上这是一种低效的常规练法（新丹低速练法）。
那如何才叫高效的练法呢？首先咱们要先来了解，专丹的SRC与DST万人包，对练的原理与意图。
此意图为，泛化SRC的变形适性，以便随时随地的，可以变成任何人（直接合成）。
但泛化变形适性这个特性，却不是只有在专丹这里独有的。大家应该知道前面还有个，预训练的万能丹底！
看到这里的诸位，基础高的是否想到了点什么？？没错，它就是预训练万能丹底时的，随机扭曲开关！！
也就是说，长时间开启过随机扭曲练出来的，预训练万能底丹。已经先天具备了，针对任何SRC的，万能泛化变形适性！！
当使用的是这种，长时间开启过随机扭曲的，预训练底丹。
只需要拿来开启随机扭曲，跑目标的SRC-SRC，即可直接变成此SRC的专丹，无需跑常规的SRC-DST！！！
众所周知，SRC-SRC为最像（自己变自己，这不废话吗）并且迭代需求极少。
此时的丹可直接合成换脸（专丹形态），将无视面部相似度，直接就是SRC的脸（本人只有DF架构）！！
LIAE架构的这样做，是否会彻底摆脱不像SRC的弊病？因为手里没有LIAE的丹，没有测试过。
但理论上LIAE架构的，应该是可以同样，无视面部相似度的（或者是达到LIAE的最高面部相似度）！！


归纳一下重点：
一，预训练底丹，必须跑过相当长时间的，随机扭曲。
二，SRC素材要求全角度，妆容统一，表情丰富，明暗光照度丰富，（这也是专丹SRC素材的基本要求）。
三，在以上两点的支持下，换脸从此不再需要与DST对跑，只需按照以前的SRC-DST流程，跑目标人物的SRC-SRC至完美即可。
四，经过上面的SRC-SRC训练后，即可直接换脸任何人（专丹形态）。
五，无视相似度，直接达到此模型架构下的，最高的面部相似度（SRC-SRC级），脸型的不像，那不属于丹的问题。
六。DST无任何限制，只需要切脸即可直接合成，甚至连遮罩都不用写，合成时遮罩选XSEG-DST，直接用MODEL下的遮罩文件。
    （由于只跑过SRC-SRC，合成用其他遮罩模式，可能会有限制）
七。注意！！！当SRC素材是不完美缺角度的（新手练手级），那么由于缺少相关素材，缺失的角度都是糊的，这并不是丹练法的问题。


测试有一定的局限性，至于是否会有弊端，现在未可知。但此练法拥有极快的复用速度，完美的面部相似度。

WaveBedo

我的计划是，用准备换脸的多个视频，切脸做成dst多人训练集，
在别人好的底丹上，增加dst多人训练集对练，开扭曲将loss降到最低，得到新的底丹，
练专丹的时候，只更换src，dst仍然用之前的dst多人训练集，
就是先把dst练好，希望通过这样的方法来减少，训练不同专丹的时间

不过，我不确定，我这个方法是否能够减少训练的时间，
以及是否能够达到最像src

come3002

感谢分享。马上测试
素材：古力 无刘海主体做src。
训练过程：全程开扭曲对练，
状态：还在训练中
预览图嘴唇纹理出来就备份测试

4k 中远景测试
左边原图（随便找了一张图 平板截屏，这个图是来自网络新剧，避免干扰）
该备份model，零训练直接合成。开W，E。T

结果：
如下图


放大看细节看嘴唇纹理也能看清。
并且跟原版嘴唇大小也不一样，更像古力特征。



由于还在训练中，很多细节需要逐步完善。比如进一步考虑优化眼神包等。
结论：该备份虽然才几天时间，已经看到看比较多的古力特征， 比较满意

若苗瞬

应该会很像src，但表情等细微部分不太像dst吧。。。
谁有条件，可以对比试试。

helas

很早之前我试过，合成效果一般

长大后才知道

helas 发表于 2023-12-20 09:19
很早之前我试过，合成效果一般

同样，论坛里很早就有人说过了。我也试了  导出DFM效果真的很差

JEEP2023

大圣总结的经验一定是经过实战的，准备测试

qq651796637

积极发言我最在行

WaveBedo

之前听你说有新的练法，就很期待！
想不到这么快就分享出来了，确实是很大公无私，感谢！

先去吃点东西，再回来拜读！

Deannnn

这不就是对练么