deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 891|回复: 9

离镇坛之宝又近了,想咨询一下关于遮罩的用法谢谢

[复制链接]

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-8-13 19:10:37 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
万能遮罩是一开始就要加入训练,还是合成视频才用呢,小白完全不懂,大大们教一下我,谢谢
回复

使用道具 举报

13

主题

994

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11929
发表于 2023-8-13 19:40:23 | 显示全部楼层
src训练前写入,dst不用写入,dst在合成的时候使用遮罩。
回复 支持 反对

使用道具 举报

17

主题

141

帖子

2299

积分

初级丹圣

Rank: 8Rank: 8

积分
2299
发表于 2023-8-13 20:58:25 | 显示全部楼层
2. 使用Xseg模型
使用Xseg模型实际上有两种使用方式,一种是在换脸模型训练前先把遮罩给推理出来,应用到训练素材中。另一种是合成时实时生成遮罩并预览。

第一种方式就是使用5.XSeg) data_src trained mask - apply.bat脚本(dst同理),讲遮罩提前生成并写入图片信息中。这样在换脸模型训练阶段就能只针对重点区域进行学习,不去学习什么口红啊,头发啊,略微能提升点质量。但个人不推荐这种方式,因为推理出来的遮罩不一定完美,如果有瑕疵就会影响训练效果。

建议使用第二种方式,在合成merge阶段,在交互预览窗口直接按X来实时计算遮罩,因为方便观察遮罩效果。X可以多按几次,有多个遮罩使用模式,总有一款会适合你
回复 支持 反对

使用道具 举报

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-8-13 21:13:02 | 显示全部楼层
seancai110 发表于 2023-8-13 19:40
src训练前写入,dst不用写入,dst在合成的时候使用遮罩。

谢谢大大
回复 支持 反对

使用道具 举报

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-8-13 21:14:48 | 显示全部楼层
iyuandou 发表于 2023-8-13 20:58
2. 使用Xseg模型
使用Xseg模型实际上有两种使用方式,一种是在换脸模型训练前先把遮罩给推理出来,应用到训 ...

真心感谢
回复 支持 反对

使用道具 举报

0

主题

51

帖子

1610

积分

初级丹圣

Rank: 8Rank: 8

积分
1610

万事如意节日勋章

发表于 2023-8-13 23:25:15 | 显示全部楼层
刚用上镇坛之宝,用的第二种方法,在合成阶段使用xseg-prd*xseg-dst,结合适当的W,E参数,感觉效果很好!
回复 支持 反对

使用道具 举报

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-8-14 02:37:48 | 显示全部楼层
sduer1 发表于 2023-8-13 23:25
刚用上镇坛之宝,用的第二种方法,在合成阶段使用xseg-prd*xseg-dst,结合适当的W,E参数,感觉效果很好! ...

开心,谢谢大大,应该还要几天就能买了
回复 支持 反对

使用道具 举报

0

主题

36

帖子

195

积分

禁止访问

积分
195
发表于 2023-8-14 08:30:49 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复 支持 反对

使用道具 举报

0

主题

44

帖子

330

积分

初级丹师

Rank: 3Rank: 3

积分
330
发表于 2023-8-15 13:06:06 | 显示全部楼层
用Xseg模型
使用Xseg模型实际上有两种使用方式,一种是在换脸模型训练前先把遮罩给推理出来,应用到训练素材中。另一种是合成时实时生成遮罩并预览。

第一种方式就是使用5.XSeg) data_src trained mask - apply.bat脚本(dst同理),讲遮罩提前生成并写入图片信息中。这样在换脸模型训练阶段就能只针对重点区域进行学习,不去学习什么口红啊,头发啊,略微能提升点质量。但个人不推荐这种方式,因为推理出来的遮罩不一定完美,如果有瑕疵就会影响训练效果。

建议使用第二种方式,在合成merge阶段,在交互预览窗口直接按X来实时计算遮罩,因为方便观察遮罩效果。X可以多按几次,有多个遮罩使用模式,总有一款会适合你

滚石大大在教程里面有说哦

https://dfldata.cc/forum.php?mod ... 1637&extra=page%3D1
回复 支持 反对

使用道具 举报

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-8-15 22:19:28 | 显示全部楼层
wjw5201314 发表于 2023-8-15 13:06
用Xseg模型
使用Xseg模型实际上有两种使用方式,一种是在换脸模型训练前先把遮罩给推理出来,应用到训练素 ...

谢谢
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-23 23:24 , Processed in 0.108805 second(s), 9 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表