手从脸部前方有动作怎么优化效果，已用遮罩

Kane · 发表于 2022-10-20 10:44:46

星级打分

1
2
3
4
5

平均分:NAN 参与人数:0 我的评分:未评

本帖最后由 Kane 于 2022-10-24 13:32 编辑

----------------------补充--------------
根据坛友的提示，发现扭曲的帧确实landmark自动切的不准确，手动画了再训练，好了很多，感谢~~
--------------------------------------------------------

一些舞蹈视频，会有手从脸部划过的动作，按大神的教程把DST和SRC差不多的素材用遮罩做标记了，遮罩学习看效果也还不错，但是合成的时候当手经过脸部时，图像会扭曲
合成效果请看GIF

训练的时候被遮挡的帧看的出来不是清晰，合成遮罩看起来是生效了
是还没训练够吗，还是哪里的参数需要优化呀感谢~~~

wwe456999 · 发表于 2022-10-20 12:20:05

landmark点标不好，b站搜mve教程

Kane · 发表于 2022-10-20 14:13:43

wwe456999 发表于 2022-10-20 12:20
landmark点标不好，b站搜mve教程

谢谢去学习看看

Kane · 发表于 2022-10-21 10:17:12

wwe456999 发表于 2022-10-20 12:20
landmark点标不好，b站搜mve教程

我更新了效果图，还请大神看看

Kane · 发表于 2022-10-21 22:20:46

wwe456999 发表于 2022-10-20 12:20
landmark点标不好，b站搜mve教程

大佬，已经按照你的教程修改了landmark了，更新后需要继续学习才可以生效吗？另外B站的视频有一个地方好像不对，就是新改的切脸图不能直接与父级关联导入，这样会把不存在对应切脸的视频图上Face信息清空，我用的方法是把新切的脸部图片覆盖到aligned目录，再重新import一次就可以了

wwe456999 · 发表于 2022-10-21 23:00:01

Kane 发表于 2022-10-21 22:20
大佬，已经按照你的教程修改了landmark了，更新后需要继续学习才可以生效吗？另外B站的视频有一个地方好 ...

上面选项有modified，可以选出改过的图，只把那些图全选再切，其他没有问题的图就不用重新切，切完放新文件夹。再关联datadst文件夹

Kane · 发表于 2022-10-22 00:09:54

wwe456999 发表于 2022-10-21 23:00
上面选项有modified，可以选出改过的图，只把那些图全选再切，其他没有问题的图就不用重新切，切完放新文 ...

还有个问题，faceswap切出来的图咋让dfl认啊，关联frame的时候，mve说no face 是faceswap的mask mve 不认吗

yexinzhang · 发表于 2022-10-23 10:23:16

这个就是遮罩不准确，要用mve调整训练遮罩准确后，在换脸就行了

Kane · 发表于 2022-10-24 13:30:14

yexinzhang 发表于 2022-10-23 10:23
这个就是遮罩不准确，要用mve调整训练遮罩准确后，在换脸就行了

是的，已经手动画了landmark，重新训练，效果好多了

		自动登录	找回密码
密码			立即注册（仅限QQ邮箱）

手从脸部前方有动作怎么优化效果，已用遮罩

万事如意节日勋章