初来乍到，萌新请教下关于XSeg遮罩问题

574508853

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

关于训练好的Xseg遮罩，该如何应用呢？目前在merge阶段一选择含XSeg选项，maskoutput下识别到的人脸为一个矩形，，，不知道出了什么问题，大佬们帮忙分析下，或者说下用法。顺便看下我的操作方式是否有问题。python main.py merge --input-dir \github\DeepFaceLab-master\data\video（dst 未extract图片） --output-dir \github\DeepFaceLab-master\data\final --output-mask-dir \github\DeepFaceLab-master\data\finaloutput --aligned-dir \github\DeepFaceLab-master\data\minedst（dst extract后的agilned的文件夹并且xseg 已apply）     --model-dir \github\DeepFaceLab-master\data\model\song --model SAEHD

output

第一张图就是output-mask-dir，可以看出人脸区域是个矩形，求大佬们解惑。第二张图所有包含xseg的选项都是错误遮罩。

无敌小金鱼

你应该发到综合区去，感觉是你的操作方式有点问题，明显遮罩没用上。

我一般会直接先训练查看了一下效果，然后如果有的效果不佳，我会打开遮罩编辑器自己手动去画一些。再次训练一下，好的遮罩模型不需要训练太久

574508853

补充一下，XSeg模型是先在论坛嫖的一个，没有再次训练。

574508853

无敌小金鱼 发表于 2021-10-22 09:47
你应该发到综合区去，感觉是你的操作方式有点问题，明显遮罩没用上。

我一般会直接先训练查看了一下效果， ...

是的，遮罩感觉就是没用到，请教下你要train XSeg，是要把 src_agilned和dst_agilned 都要画遮罩，然后train对嘛？

无敌小金鱼

574508853 发表于 2021-10-22 10:00
是的，遮罩感觉就是没用到，请教下你要train XSeg，是要把 src_agilned和dst_agilned 都要画遮罩，然后tr ...

看你的素材来定，其实SRC和DST原理都差不多，如果你本身素材里的遮挡很复杂，那你的遮罩模型可能就没有这个遮罩可以相对应的，所以就需要手动去画几张然后训练让它自学习，通常一般的普通头发块状遮挡问题都不大，不需要去画，直接应用就行。

目前还没有论坛的万能遮罩前可以用下国外论坛这位Groggy4大神的遮罩也非常好用，接近100万的训练。
https://drive.google.com/drive/f ... sjAhGteiavKKlVBSGMe

574508853

无敌小金鱼 发表于 2021-10-22 10:10
看你的素材来定，其实SRC和DST原理都差不多，如果你本身素材里的遮挡很复杂，那你的遮罩模型可能就没有这 ...

用的好像就是这个

无敌小金鱼

574508853 发表于 2021-10-22 10:16
用的好像就是这个

那这和模型没关系的，就是你的操作问题。建议再细看一下有关遮罩的教程。

omesa

我都是画一些遮罩，dts和src的都画，然后训练遮罩，训练一定程度后应用看没问题了再训练模型

574508853

omesa 发表于 2021-10-22 11:49
我都是画一些遮罩，dts和src的都画，然后训练遮罩，训练一定程度后应用看没问题了再训练模型 ...

好的，谢谢，你是训练SAEHD也使用的切脸数据嘛？

omesa

574508853 发表于 2021-10-22 14:33
好的，谢谢，你是训练SAEHD也使用的切脸数据嘛？

我都是按论坛教学的方法做的