求问，合成器的learned-dst遮罩是怎么来的？

seancai110 · 发表于 2023-4-12 09:28:09

星级打分

平均分:NAN 参与人数:0 我的评分:未评

本帖最后由 seancai110 于 2023-4-12 10:18 编辑

从论坛里下了一个网友的底丹，效果不错。而且在换脸的时候，在合成界面把遮罩模式切换到learned-dst就能漏出脸部的话筒。

但是一旦我放自己的src训练模型，在合成的时候，learned-dst模式里话筒就会被遮挡。

想问一下，这个learned-dst的遮罩从哪来的啊，我训练的时候怎么保留这个效果。。。我看坛子里是Xseg遮罩的教程，好像和这个没有关系。

Woaiqipao · 发表于 2023-4-12 20:35:44

本帖最后由 Woaiqipao 于 2023-4-12 20:37 编辑

lerned -dst 默认的遮罩范围，就是DST 人脸的绿色标记点（landmark）的范围。好比星爷的这个脸色灰色轮廓就是遮罩范围

这幅画面就是DST的话，要只换人脸，保留话筒，就是在DST这个脸上画遮罩，或者用现成遮罩模型应用。

seancai110 · 发表于 2023-4-12 20:42:13

Woaiqipao 发表于 2023-4-12 20:35
lerned -dst 默认的遮罩范围，就是DST 人脸的绿色标记点（landmark）的范围。好比星爷的这个脸色灰色轮廓 ...

但是，为啥我直接用底丹就能漏出话筒。而我在底丹基础上训练换脸，就挡住话筒了？？

不过我还是从坛子里下了一个Xseg，解决了话筒问题

就是对这个事情的原理比较好奇。

Woaiqipao · 发表于 2023-4-12 20:59:13

seancai110 发表于 2023-4-12 20:42
但是，为啥我直接用底丹就能漏出话筒。而我在底丹基础上训练换脸，就挡住话筒了？？

不过我还是从 ...

这个我也想不通。。。

ken2099 · 发表于 2023-4-13 02:49:14

底丹在训练的时候，用的素材都是写入过遮罩的
这样底丹能学到一些遮罩能力
你自己跑，显然你的素材没有写入过遮罩，因为你遮罩模型才刚弄的
那么模型就没有遮罩能力
就是这样吧

kissboss · 发表于 2023-4-13 12:55:35

路漫漫啊新手小白还在摸索中遮罩还用不明白呢

seancai110 · 发表于 2023-4-14 22:51:40

ken2099 发表于 2023-4-13 02:49
底丹在训练的时候，用的素材都是写入过遮罩的
这样底丹能学到一些遮罩能力
你自己跑，显然你的素材没有写入 ...

好吧，看来还是用Xseg稳妥

		自动登录	找回密码
密码			立即注册（仅限QQ邮箱）