只训练data_src是否可行，想减少训练时间

leijun · 发表于 2023-1-28 15:52:02

购买主题本主题需向作者支付 100 灵石 才能浏览

a11290403 · 发表于 2023-1-28 17:37:05

本帖最后由 a11290403 于 2023-1-28 17:38 编辑

你可能不了解万能模型
万能模型=专人模型
专人模型就是只换dst ，不换src
专人模型可以减少训练时间，甚至不需要训练可以直接合成，但效果偏差
这是大佬的万能模型的训练方法
https://dfldata.xyz/forum.php?mo ... D%E6%A8%A1%E5%9E%8B

我自己的训练方法是src和dst方一样的素材一直跑

银质骑士 · 发表于 2023-1-28 17:22:14

你尝试好了告诉我们结果。。。

feng7902 · 发表于 2023-1-28 17:37:26

训练时间你减少的话，对你往后合成的视频都是存在一点影响的，

丸丸 · 发表于 2023-1-28 23:40:22

没有意义，只适用表情角度完全一样的视频，问题是不可能一样

leijun · 发表于 2023-1-29 21:00:38

迭代了1.6W次，看效果好像可以
第一行是原图，第二行是生成（非merge后）的图

猜测只有开GAN之后，src和dst一起训练才有意义，GAN有判别器损失函数。
不开GAN训练的话，只是分别训练了src和dst的损失函数，并且两个损失函数之间没有关联。

关键代码如上，大意是训练一个裁判员（判别器），可以正确判断哪些是‘深度伪造’的，哪些是真正的脸。体现到代码上就是告诉裁判员给伪造的脸打0分，给真正的脸打1分。

Aufheben · 发表于 2023-1-30 11:22:03

源码大佬orz，你这做法是dst文件夹不放文件吗？
但是似乎liea结构有interAB的数据，这个在不开GAN的时候也会生成，这个应该是两个网络之间的某些关联？

leijun · 发表于 2023-1-30 12:54:14

Aufheben 发表于 2023-1-30 11:22
源码大佬orz，你这做法是dst文件夹不放文件吗？
但是似乎liea结构有interAB的数据，这个在不开GAN的时候也 ...

dst文件没动，改了下源码，用的是df架构，liae架构还没研究。改动比较简单，主要是删除训练dst部分的loss,有兴趣的道友，可以私信我改动的部分代码

leijun · 发表于 2023-1-30 22:50:55

model.py.txt (36.83 KB, 下载次数: 6)
修改后的文件，只支持df架构，复制到 _internal\DeepFaceLab\models\Model_SAEHD 目录下覆盖原有文件即可

leijun · 发表于 2023-1-30 23:25:09

看了一篇科普文章，没有用gan的换脸示意图

		自动登录	找回密码
密码			立即注册（仅限QQ邮箱）

只训练data_src是否可行，想减少训练时间

万事如意节日勋章