讨论一下，不搞直播我觉得完全没有必要用遮挡训练集

DFL小白02

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

如题，我的观点不搞直播没必要用一些遮挡素材当训练集，我觉得这干扰源脸对dst的重建替换过程，训练时学习遮挡的观点我觉得是错的（假设未来就是去处理有遮挡的dst视频直接用遮罩模型合成时使用就好了我觉得在训练中没必要引入遮挡干扰）

ZZX1128

希望解释一下大概原因

lknet

我感觉也是，只要不是直播那种不确定的遮挡，都没有必要额外训练，

seancai110

开mask train其实主要不是为了练遮罩。xseg遮罩是另外练的。开这个是为了在训练的时候，尽量排除遮挡物的干扰，别把遮挡物学进去。

DFL小白02

seancai110 发表于 2025-5-31 18:37
开mask train其实主要不是为了练遮罩。xseg遮罩是另外练的。开这个是为了在训练的时候，尽量排除遮挡物的干 ...

所以我说的是不用带遮挡的dst素材，我觉得这个会干扰dst完整脸部特征的正确学习，对训练效果没啥好处

seancai110

DFL小白02 发表于 2025-5-31 18:39
所以我说的是不用带遮挡的dst素材，我觉得这个会干扰dst完整脸部特征的正确学习，对训练效果没啥好处 ...

眼镜和刘海很难排除。

Cxsmo

I all depends its always more efficient to have the dfm learn obstruction and stuff instead of just relying on a xseg model during merge or live to do the job for you and I know from mainly using a xseg fork of dflive

DFLive

DFL小白02 发表于 2025-5-31 18:39
所以我说的是不用带遮挡的dst素材，我觉得这个会干扰dst完整脸部特征的正确学习，对训练效果没啥好处 ...

可是有些角度和表情只有遮挡的素材有，你怎么取舍。

WaveBedo

seancai110 发表于 2025-5-31 19:40
眼镜和刘海很难排除。

src的刘海全都用遮罩排除掉，
全程都不关mask train，
额头也会出现黑乎乎的东西吗

DFL小白02

Cxsmo 发表于 2025-5-31 23:45
I all depends its always more efficient to have the dfm learn obstruction and stuff instead of just  ...

But I don't need dfm or deepfacelive, in this premise, blocked face is one kind of noise, true?