deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 2356|回复: 50

如何能让合成的脸更像SRC?

[复制链接]

50

主题

1223

帖子

8020

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8020
 楼主| 发表于 2022-4-17 06:56:16 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 WinKK 于 2022-4-17 19:16 编辑

最近试了两个模型256WF DF-UD,和224WF LIAE-UDT ,效果都还不错。
可是,总觉得合成的脸像SRC,却不是SRC。而是另外一个介于SRC和DST之间的人。

请问如何能让合成的脸更接近SRC,而去掉DST的影响呢?

开始尝试AMP模型,只是进展很慢。而且,AMP与DST是SRC的模型有什么区别啊?

请求大家指教!

想了想,可能是长期用一个DST训练的问题。因为前面一直在补充大角度,所以用一金鱼大佬那个库训练了一个月。角度虽然补得差不多了,但是,DST的影响很大,以至于合成的图都有DST的影子。

已经把DST换了。看看效果。


图是LIAE模型合成的,刚换DST几分钟的效果。



6.png
回复

使用道具 举报

2

主题

236

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11340
发表于 2022-4-17 13:20:45 | 显示全部楼层
WinKK 发表于 2022-4-17 10:11
刚开始缺角度时,确实用补角度的方法把DST生成图放到SRC中。现在已经删除了。
不过,确实共存训练过一段 ...

如果是经过训练后生成的图是可以用的,直接用DST素材补充就不太推荐;除非是角度非常大,不容易识别出是谁,又没有SRC原素材的情况下才考虑用DST替代
回复 支持 1 反对 0

使用道具 举报

43

主题

2026

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11522
发表于 2022-4-17 07:05:47 | 显示全部楼层
多少会有影响,主要是脸型差别和个人心理因素造成影响,我的想法就是先处理dst使脸型接近src,然后再训练合成,dfl应该增加一项编辑脸型的功能,这样才能做出比较完美的效果,至于个人心理因素的解决方法比较简单,拿给他人看别人一眼能认出来是谁就是成功
回复 支持 1 反对 0

使用道具 举报

50

主题

1223

帖子

8020

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8020
 楼主| 发表于 2022-4-17 07:09:19 | 显示全部楼层
wcw888 发表于 2022-4-17 07:05
多少会有影响,主要是脸型差别和个人心理因素造成影响,我的想法就是先处理dst使脸型接近src,然后再训练合 ...

是啊,脸型这个东西真没办法。有时某个角度很像,换个角度又完全不对了。

上面的图,你认出是谁了吗? 是不是前一张认不出,后一张还行?

这怎么解啊
回复 支持 反对

使用道具 举报

43

主题

2026

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11522
发表于 2022-4-17 08:59:58 | 显示全部楼层
WinKK 发表于 2022-4-17 07:09
是啊,脸型这个东西真没办法。有时某个角度很像,换个角度又完全不对了。

上面的图,你认出是谁了吗?  ...

还好,侧脸本身辨识度就不高,所以尽可能用正脸如果单独给这两张图看,我会觉得这是同一个人
回复 支持 反对

使用道具 举报

6

主题

407

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
20552
发表于 2022-4-17 09:10:54 | 显示全部楼层
开gan和trueface看看
回复 支持 反对

使用道具 举报

50

主题

1223

帖子

8020

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8020
 楼主| 发表于 2022-4-17 09:17:24 | 显示全部楼层
2605088505 发表于 2022-4-17 09:10
开gan和trueface看看

GAN=0.2,口眼也开了,已经跑到70W。
总觉得trueface没什么用,还没开。

要不试试这个?
回复 支持 反对

使用道具 举报

1

主题

91

帖子

757

积分

高级丹师

Rank: 5Rank: 5

积分
757
发表于 2022-4-17 09:18:48 | 显示全部楼层
谢谢分享。学习。
回复 支持 反对

使用道具 举报

6

主题

507

帖子

3177

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3177
发表于 2022-4-17 09:18:54 | 显示全部楼层
侧脸本身辨识度就不高
回复 支持 反对

使用道具 举报

15

主题

1798

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
13841
发表于 2022-4-17 09:22:36 | 显示全部楼层
能认出赵今麦
回复 支持 反对

使用道具 举报

2

主题

236

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11340
发表于 2022-4-17 09:28:25 | 显示全部楼层
你是不是直接用DST来填充SRC了,个人觉得不到万不得已,尽量不要这样做;因为有些缺少的角度是可以通过训练脑补出来的,我也刚练了个LIAE-UDT 224WF的模型 捕获.PNG
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-21 14:49 , Processed in 0.096163 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表