dst有口罩，有办法让最终结果没有口罩吗？

deviljoker5200

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

data_dst的人物是有口罩的。提取脸部后，看_debug文件夹下，脸部是识别到了，包括口罩下的嘴巴鼻子的位置。但是train的时候，因为有口罩的原因，无法像正常生成result脸部。
1.有没有办法将通过其他软件将口罩替换成大概的脸部特征，这样可以正常训练。
2.deepfacelab有没有通过debug拿到的脸部特征位置，直接将data_src的学习出来的脸部放到result中。就算没有表情也可以。   

看了有个全脸替换的方法，也尝试把口罩画进遮罩中，但是最终识别出来的aligned还是一样的，训练的的东西没有变化。merge的时候还是用的训练出来的结果，可不可以直接用src或者直接绕过口罩不纳入训练区域。

简单来说，目的是dst有口罩，有办法让最终结果没有口罩吗？

deviljoker5200

labels 发表于 2022-7-11 01:54
【独孤大师开讲系列-2】合成蒙版遮罩之运用
https://www.dfldata.xyz/forum.php?mod=viewthread&tid=7966
...

按照讲解做了几次尝试。都是这种效果。图1 方形的那个就是train之后的结果。图2就是自己画的遮罩将口罩包含在里面的结果。
在我看来，只要dst有口罩，训练时必带上口罩训练，而result也将有口罩部分，最终合成merge时，随便怎么切换x都是有口罩的情况。
不知道哪些步骤弄错了，可以讲讲大致的操作流程吗？

deviljoker5200

zuishuai 发表于 2022-7-10 16:51
用万能遮罩

万能遮罩能解决口罩问题吗？要怎么操作呢

deviljoker5200

zuishuai 发表于 2022-7-10 16:56
就是只换口罩上方的眼睛阿，口罩不动，就是一个遮罩的事

我的意思是将口罩一并替换成src脸部。你说的是只替换到口罩以上的脸部，不是我的目的

deviljoker5200

zuishuai 发表于 2022-7-10 16:58
要是想把口罩都去掉就用mve画

不是很明白这个怎么操作。mve画好后，最终生成出来的data_dst/aligned里面人物头像也是包含了口罩的。和dfl识别出来的没有区别的，结果应该是一样的。不知道我理解的对不对。有大致的操作流程吗？

a405856477

用遮罩就可以了

uchunter

都只剩眼睛了，你换她干嘛，你这是想把只狗换成人脸的节奏啊