deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 54905|回复: 365

【万能模型训练方法】你没看错,就这么简单

  [复制链接]

216

主题

1998

帖子

68万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
688217

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

发表于 2020-12-12 23:11:48 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:5  参与人数:2  我的评分:未评
1. 只支持DF结构
2. dst丢各种人脸数据进去,越杂越好,src保持单人数据
3. 训练时把true face参数打开,推荐0.01

你可以在别的DF预训练模型上,按上述方法练。然后就挂机练,多日后就练成了。
是不是特别简单?

-------------------萌新分割线--------------------------
但其背后原理不简单。
true face 参数开启后,对模型的中间层会施加一个判别器,来约束DST和SRC编码出来的码越相似越好,强迫编码器部分只抽取共性特征,放弃非共同特征
这样dst就能丢这种各样的图来训练,而且不会中间层特征带来负面作用。
如果不加这个中间层约束,那dst加入大量杂数据后,中间层把原图所有特征都包含进来,这样就容易影响src自身的生成,让src带上dst的影子。
微信截图_20201212231033.png

评分

参与人数 8贡献 +8 收起 理由
asd1342180911 + 1 太好了感谢楼主
feng7902 + 1 赞一个!
doler + 1
mldkk + 1 很给力!
xfdnao + 1 很给力!
dim206 + 1 很给力!
WinKK + 1 赞一个!
gdrivessd01 + 1 赞一个!

查看全部评分

提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复

使用道具 举报

216

主题

1998

帖子

68万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
688217

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

 楼主| 发表于 2020-12-18 18:57:51 | 显示全部楼层
poiu88 发表于 2020-12-18 11:52
信任问题,为何只是支持 DF ?

Liaef结构特殊,不支持true face机制
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 2 反对 1

使用道具 举报

2

主题

214

帖子

1151

积分

初级丹圣

Rank: 8Rank: 8

积分
1151
发表于 2021-2-3 16:55:10 | 显示全部楼层
大佬一出手就石破天惊
回复 支持 1 反对 1

使用道具 举报

1

主题

449

帖子

6476

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6476

万事如意节日勋章

发表于 2021-5-4 10:05:25 | 显示全部楼层
大佬,练到什么程度,预览图的效果到哪种程度才算完成?
回复 支持 1 反对 0

使用道具 举报

4

主题

58

帖子

561

积分

高级丹师

Rank: 5Rank: 5

积分
561
发表于 2021-1-17 17:49:07 | 显示全部楼层
请问坛主:
一: 除了 true face 参数,其它参数要怎么开啊?
二:true face 是要一开始就打开吗? 还是训练一段时间后再打开啊?
回复 支持 1 反对 0

使用道具 举报

80

主题

1542

帖子

8029

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8029

万事如意节日勋章

发表于 2020-12-15 21:28:54 | 显示全部楼层
滚石 发表于 2020-12-13 09:00
同一视频换不同人脸,用预训练模型做迁移训练,也很快,跑个十来分钟效果也差不多了 ...

萌新没明白,就是把所有做SCR的人脸做成预训练吗?
还是把同一视频的人脸做成预训练?纠结
回复 支持 1 反对 0

使用道具 举报

8

主题

139

帖子

3995

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3995
发表于 2020-12-14 10:31:31 | 显示全部楼层
大佬就是大佬
回复 支持 1 反对 0

使用道具 举报

216

主题

1998

帖子

68万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
688217

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

 楼主| 发表于 2020-12-13 09:00:35 | 显示全部楼层
mzh920 发表于 2020-12-13 08:01
坛主,有很多不同的源视频转成相同dst的,这种是一个一个练的,还是也有批量的方法啊? ...

同一视频换不同人脸,用预训练模型做迁移训练,也很快,跑个十来分钟效果也差不多了
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 1 反对 0

使用道具 举报

1

主题

111

帖子

616

积分

高级丹师

Rank: 5Rank: 5

积分
616
发表于 2020-12-13 06:05:23 | 显示全部楼层
本帖最后由 fytxh26 于 2020-12-13 06:21 编辑

1VN,找到1和N的交集,跟N熟了之后,再来个陌生人也能很快熟悉起来。谢谢大佬分享,  我们对大佬的 数据集 很感兴趣
回复 支持 1 反对 0

使用道具 举报

6

主题

26

帖子

8570

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8570
发表于 2020-12-12 23:17:56 | 显示全部楼层
学到了学到了
回复 支持 反对

使用道具 举报

19

主题

191

帖子

220万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
2205470

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

QQ
发表于 2020-12-12 23:54:52 | 显示全部楼层
emm、、、这个方法只适用于特定人物的万能丹吧,更换其他的src就不行了
回复 支持 反对

使用道具 举报

0

主题

268

帖子

2049

积分

初级丹圣

Rank: 8Rank: 8

积分
2049

万事如意节日勋章

发表于 2020-12-13 06:20:58 | 显示全部楼层
看似简单,包含智慧,谢谢分享
回复 支持 反对

使用道具 举报

80

主题

1542

帖子

8029

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8029

万事如意节日勋章

发表于 2020-12-13 07:30:20 | 显示全部楼层
绝对的技术贴,对参数了如指掌才会做到
回复 支持 反对

使用道具 举报

0

主题

107

帖子

866

积分

高级丹师

Rank: 5Rank: 5

积分
866
发表于 2020-12-13 07:39:26 | 显示全部楼层
大佬牛
回复 支持 反对

使用道具 举报

80

主题

1542

帖子

8029

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8029

万事如意节日勋章

发表于 2020-12-13 08:01:54 | 显示全部楼层
坛主,有很多不同的源视频转成相同dst的,这种是一个一个练的,还是也有批量的方法啊?
回复 支持 反对

使用道具 举报

0

主题

20

帖子

175

积分

高级丹童

Rank: 2

积分
175
发表于 2020-12-13 09:14:11 | 显示全部楼层
学习一下
回复

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-24 19:37 , Processed in 0.170779 second(s), 55 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表