deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
12
返回列表 发新帖
楼主: menglue

src怎么练都像dst,求帮助!

[复制链接]

45

主题

840

帖子

6384

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6384

万事如意节日勋章开心娱乐节日勋章

发表于 前天 19:51 | 显示全部楼层
xunlian 发表于 2025-6-4 19:58
deepfacelab设计初衷1换1,然而现在为了一劳永逸,搞出了所谓专丹。本身就违背了原始初衷。 ...

所以,我看到dst很多杂图应该无效的,没有意义的,
因为你要换的视频,根本不会出现dst杂图当中的遮挡、刘海、明暗、脸型、颜色,
所以,我觉得dst当中很多的杂图应该剔除掉的,否则,它只是浪费电费而已

我认为dst杂图只要包含换脸视频当中所有可能的场景就足够了,
这样才有针对性,也可以减少大量无效的训练
回复 支持 反对

使用道具 举报

3

主题

77

帖子

1825

积分

初级丹圣

Rank: 8Rank: 8

积分
1825
发表于 前天 20:31 | 显示全部楼层
WaveBedo 发表于 2025-6-5 19:51
所以,我看到dst很多杂图应该无效的,没有意义的,
因为你要换的视频,根本不会出现dst杂图当中的遮挡、刘 ...

DFL 1对1的训练,是绝对不会越练越像DST的。
1对多的练,才会出现越练越像DST。
举个简单例子
src 36码的脚 DST 40码鞋子 由于是1对1,36的脚无条件去穿40码的鞋。

当SRC 是36码脚  DST 有33 34 35 36 37 38的鞋。SRC会很自然偏向36的DST,排除其余的DST,因为36才是最优解。这也就解释了,为什么越练越像DST。
DFL原理就是SRC与DST之间的最优解匹配,当多DST出现时,非最优解的DST就是干扰。
至于为什么初期效果不错,反而越练越像DST,出现这种退步的现象呢?
在初期过程中,SRC还无法确定自己脚的尺码 DST也无法确定自己鞋的尺码,所以只要是双鞋,SRC就会去穿,随着不断的训练,SRC慢慢知道了自己脚的尺码,DST也慢慢知道自己鞋子尺码,这时候SRC就会挑合适自己的鞋了。
网上的教程其实都是1对1训练的教程,并非万能模型训练方法。

回复 支持 反对

使用道具 举报

45

主题

840

帖子

6384

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6384

万事如意节日勋章开心娱乐节日勋章

发表于 前天 23:23 | 显示全部楼层
xunlian 发表于 2025-6-5 20:31
DFL 1对1的训练,是绝对不会越练越像DST的。
1对多的练,才会出现越练越像DST。
举个简单例子

像的问题,我觉得要从针对性来做,
例如,你要换的dst是个瓜子脸,但你使用的dst训练集都是胖脸的话,
当你合成的时候,相似度是一定会降低的,因为你模型的图片都是根据胖脸来练的。

你要换瓜子脸,那训练集里面必须要有足够的瓜子脸,否则就会不像
回复 支持 反对

使用道具 举报

9

主题

245

帖子

4463

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4463
QQ
发表于 昨天 09:18 | 显示全部楼层
menglue 发表于 2025-6-5 11:55
删掉也要练,在练的过程还不是要过拟合!!我就在想,该怎么练,我想着要不先用和src脸型差不多的素材, ...

是的,删掉后要重新练,如果重新练的过程中犯错,结果还是会是一样的
回复 支持 反对

使用道具 举报

3

主题

77

帖子

1825

积分

初级丹圣

Rank: 8Rank: 8

积分
1825
发表于 昨天 16:13 | 显示全部楼层
WaveBedo 发表于 2025-6-5 23:23
像的问题,我觉得要从针对性来做,
例如,你要换的dst是个瓜子脸,但你使用的dst训练集都是胖脸的话,
当 ...

其实这是就是过拟合了,按你说的 瓜子脸和胖脸长时间的训练,模型已经固化了瓜子脸和胖脸的映射,在长时间的训练中,模型认为瓜子脸对应胖脸就是最优解。即使你来个瓜子脸,模型任然认为胖脸是最优解,不产生映射,直接输出DST。

提示一点:即使DST 瓜子脸,胖脸,各种脸掺杂练,也是练不出所谓真正意义的万能模型。
回复 支持 反对

使用道具 举报

45

主题

840

帖子

6384

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6384

万事如意节日勋章开心娱乐节日勋章

发表于 昨天 18:59 | 显示全部楼层
xunlian 发表于 2025-6-6 16:13
其实这是就是过拟合了,按你说的 瓜子脸和胖脸长时间的训练,模型已经固化了瓜子脸和胖脸的映射,在长时间 ...

好的
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-6-7 05:58 , Processed in 0.101184 second(s), 30 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表