deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1477|回复: 26

各大大佬,预训练和src-src对练的区别是什么?

[复制链接]

27

主题

265

帖子

2315

积分

初级丹圣

Rank: 8Rank: 8

积分
2315
 楼主| 发表于 2025-2-1 22:13:39 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
现在有些大佬训练一个新模型不打开预训练选项而是直接训练 SAEHD SRC-SRC。请问这种训练方法和打开预训练的区别是什么? SAEHD SRC-SRC训练要开扭曲吗?
回复

使用道具 举报

41

主题

559

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
21070
发表于 2025-2-2 04:48:01 | 显示全部楼层
本帖最后由 dfl9999 于 2025-2-2 05:07 编辑

预训练使用的是通用人脸数据集,比如你的src+dst+其他的人脸数据。
src-src就是正训,不过使用的数据集是你的src。
预训练学习的是通用人脸数据集的一般人脸特征,比如皮肤光影、皮肤的一般纹理、五官结构和表情,不针对特定人脸;src-src学习的是src的精细人脸特征,比如精确五官定位、皮肤精细纹理、面部映射,针对dst-src各自的数据进行融合人脸计算,src-src只学习src-src一对一的人脸特征。
预训练不包含需要换脸的src-dst映射信息,预训练模型必须要经过正训才能使用,src-src包含需要换脸的全部信息,不过是单一映射。
预训练的目的是让模型有一个良好的泛化开端,正式训练的目的是利用这些泛化对单一换脸任务进行强化。
预训练是在加工食材、熟悉火候从而有利于烹饪食物,让比较烂的食材也能有个及格线以上的味道,直接正式训练是边煮边吃,具体效果就靠烹饪人的本事和食材质量还有搭配。
预训练可以承担模型正训80%以上枯燥而重复的工作量,让正式训练能更注重于模型扭曲和脸部精细细节构建。
src-src的目的是让模型提前固化src人脸权重,可以让后续加入的dst更像src,但是src-src训练绝对不等于预训练,二者模型性能也相差甚远。


回复 支持 1 反对 0

使用道具 举报

14

主题

3458

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
18939

真我风采勋章万事如意节日勋章

发表于 2025-2-1 23:00:38 | 显示全部楼层
预训练,参数是定死的。小白用。
SRC-SRC,参数自定。熟手或高手用。
回复 支持 反对

使用道具 举报

27

主题

265

帖子

2315

积分

初级丹圣

Rank: 8Rank: 8

积分
2315
 楼主| 发表于 2025-2-1 23:13:42 | 显示全部楼层
wtxx8888 发表于 2025-2-1 23:00
预训练,参数是定死的。小白用。
SRC-SRC,参数自定。熟手或高手用。

liae-udt的模型的话SRC-SRC训练要开扭曲吗?如果用杂图集训练完之后要不要不删AB?
预训练的模型12列和345列可以说是毫无相关的(第五列不会变形成第一列的样子)SRC-SRC训练也是这样的吗?
回复 支持 反对

使用道具 举报

90

主题

1662

帖子

8636

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8636

万事如意节日勋章开心娱乐节日勋章

发表于 2025-2-1 23:35:31 | 显示全部楼层
建议去了解一下预训练和对练是什么,对练是正训的其中一种方法
回复 支持 反对

使用道具 举报

14

主题

3458

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
18939

真我风采勋章万事如意节日勋章

发表于 2025-2-2 00:34:50 | 显示全部楼层
本帖最后由 wtxx8888 于 2025-2-2 00:37 编辑
fghfdg 发表于 2025-2-1 23:13
liae-udt的模型的话SRC-SRC训练要开扭曲吗?如果用杂图集训练完之后要不要不删AB?
预训练的模型12列和34 ...

这么久,都在闭眼瞎玩?
这是教程,都没看过?还是,看了个寂寞?
回复 支持 反对

使用道具 举报

27

主题

265

帖子

2315

积分

初级丹圣

Rank: 8Rank: 8

积分
2315
 楼主| 发表于 2025-2-2 01:04:52 | 显示全部楼层
wtxx8888 发表于 2025-2-2 00:34
这么久,都在闭眼瞎玩?
这是教程,都没看过?还是,看了个寂寞?

之前一直都是复用别人的模型,现在开始试一下从零开始训练一个看看。我觉得新建模型的预训练很有必要的,预训练的我知道是什么,但是对练不太了解,按照我的理解的话对练应该不能直接代替预训练吧?但是你之前发的mve增强版不是把预训练改为了0) 预训练 SAEHD SRC-SRC吗?(没记错的话这个 SRC-SRC是直接开始正训的)
回复 支持 反对

使用道具 举报

14

主题

3458

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
18939

真我风采勋章万事如意节日勋章

发表于 2025-2-2 02:35:22 | 显示全部楼层
本帖最后由 wtxx8888 于 2025-2-2 02:46 编辑
fghfdg 发表于 2025-2-2 01:04
之前一直都是复用别人的模型,现在开始试一下从零开始训练一个看看。我觉得新建模型的预训练很有必要的, ...

真知道预训练是什么?就不会问SRC-SRC了。
预训练,就是SRC-SRC,教程纯看了个寂寞。。。
区别就是,SRC-SRC可以自定参数配合。
预训练项目,参数定死不可更改。外加LOSS计算的方式不同(遮罩模型)。
人脸模型的预训练项目,这些参数,全部强制为以下。
            self.options_show_override['lr_dropout'] = 'n'
            self.options_show_override['random_warp'] = False
            self.options_show_override['gan_power'] = 0.0
            self.options_show_override['random_hsv_power'] = 0.0
            self.options_show_override['face_style_power'] = 0.0
            self.options_show_override['bg_style_power'] = 0.0
            self.options_show_override['uniform_yaw'] = True


回复 支持 反对

使用道具 举报

27

主题

265

帖子

2315

积分

初级丹圣

Rank: 8Rank: 8

积分
2315
 楼主| 发表于 2025-2-2 02:46:02 | 显示全部楼层
wtxx8888 发表于 2025-2-2 02:35
真知道预训练是什么?就不会问SRC-SRC了。
预训练,就是SRC-SRC,教程纯看了个寂寞。。。
区别就是,SRC ...

看教程和实操是两回事预训练LOSS计算的方式不同我是发现了,我预训练个模型转正训之后之前练过的图loss比预训练的时候高多了。而且预训练只放一个pak文件确实跟SRC-SRC一样参数还不能改(预训练是没开扭曲的),现在感觉懵逼的是。直接SRC-SRC开不开扭曲的好。或者说开扭曲了会有什么影响?在论坛上好像没有详细介绍对练参数的帖子
回复 支持 反对

使用道具 举报

27

主题

265

帖子

2315

积分

初级丹圣

Rank: 8Rank: 8

积分
2315
 楼主| 发表于 2025-2-2 02:49:35 | 显示全部楼层
wtxx8888 发表于 2025-2-2 02:35
真知道预训练是什么?就不会问SRC-SRC了。
预训练,就是SRC-SRC,教程纯看了个寂寞。。。
区别就是,SRC ...

预训练这些参数强制关闭我知道的,我刚刚预训练完一个模型,主要是对练的不懂
image.png 这个说法是正确的吗?
回复 支持 反对

使用道具 举报

14

主题

3458

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
18939

真我风采勋章万事如意节日勋章

发表于 2025-2-2 02:49:48 | 显示全部楼层
fghfdg 发表于 2025-2-2 02:46
看教程和实操是两回事预训练LOSS计算的方式不同我是发现了,我预训练个模型转正训之后之前练过的图loss ...

参数,要看个人需求。一般不需要开(跟参数的预训练,一致)。
至于开了,符不符合自己的需求,别人哪知道,你心里想要啥?
自己测了看结果吧。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-9-14 19:34 , Processed in 0.111110 second(s), 37 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表