deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1504|回复: 9

关于表情问题,求大佬解惑,谢谢!

[复制链接]

4

主题

152

帖子

1006

积分

初级丹圣

Rank: 8Rank: 8

积分
1006
发表于 2021-7-25 09:22:28 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
以前一直被换脸的表情问题困扰,如果SRC素材由于表情和脸部的缺失导致换脸完成后成品视频人物表情表情僵硬,死亡角度模糊,成品视频质量不高。模型训练了很长时间还是达不到很好的效果,原则上来说只能用大量多表情和角度的SRC素材来训练才能解决。
但是最近我用DST目标脸作为SRC素材,DST目标脸素材来训练,也就是SRC和DST里的aligned文件夹图片是一样的来训练。
发现训练一段时间后再将SRC里的DST换原来SRC接着训练,基本上能解决目标视频表情不足的问题。
可能大佬们早已经尝试过这样做了。
简单来说就是这样的流程
SRC源-A(表情不多)
DST源-B(表情丰富)
将A和B按照正常程序训练很长一段时间合成发现RESULT视频表情僵硬
然后把SRC源的A换成DST源B,再训练一段时间,这样让机器学习目标B里面的表情。
训练结束后把SRC里的目标脸B再换回A,接着训练一段时间再合成的话RESULT视频里的表情就不会那么僵硬了。
但是我还有一个问题需要请教大佬们,就是我来来回回试了几次发现当SRC里的图片换回A之后短时间训练表情基本上不会变,但是训练时间长了表情又慢慢变了回去。
造成这样的原因还是因为SRC源素材表情不足吗?



回复

使用道具 举报

10

主题

2828

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
17198

万事如意节日勋章

发表于 2021-7-25 13:30:59 | 显示全部楼层
这样换出会不像
回复 支持 反对

使用道具 举报

25

主题

2095

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12085
发表于 2021-7-25 13:33:54 | 显示全部楼层
这样会训练出四不像
回复 支持 反对

使用道具 举报

3

主题

323

帖子

4564

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4564
发表于 2021-7-25 21:12:15 | 显示全部楼层
只有自己去找角度素材了
回复 支持 反对

使用道具 举报

3

主题

563

帖子

4639

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4639
发表于 2021-7-25 21:30:54 | 显示全部楼层

去找角度素材
回复 支持 反对

使用道具 举报

0

主题

38

帖子

256

积分

初级丹师

Rank: 3Rank: 3

积分
256
发表于 2021-7-26 09:58:28 | 显示全部楼层
xuciyu 发表于 2021-7-25 21:12
只有自己去找角度素材了

意思是只能通过找到更多SRC的素材才能解决吗?
回复 支持 反对

使用道具 举报

2

主题

287

帖子

2515

积分

初级丹圣

Rank: 8Rank: 8

积分
2515

万事如意节日勋章

发表于 2021-7-26 11:45:51 | 显示全部楼层
没有简单的办法
回复 支持 反对

使用道具 举报

0

主题

38

帖子

256

积分

初级丹师

Rank: 3Rank: 3

积分
256
发表于 2021-7-26 16:41:25 | 显示全部楼层
如果是那种非明星的源目标,表情少很常见,如何处理需要认真学习
回复 支持 反对

使用道具 举报

0

主题

1682

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
10821

万事如意节日勋章

发表于 2021-7-29 08:13:16 | 显示全部楼层
S素材要多角度 多光影  才能处理问题  其他都是一点点改善或根本没用
回复 支持 反对

使用道具 举报

0

主题

612

帖子

3231

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3231
发表于 2021-8-16 02:54:02 | 显示全部楼层
仙丹再来一个吧,小学文凭就这个水平了,见笑
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-29 06:38 , Processed in 0.143034 second(s), 39 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表