deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 13558|回复: 150

Xseg遮罩使用讲解

  [复制链接]

204

主题

1959

帖子

57万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
576810

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

发表于 2020-12-20 23:16:55 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
Xseg可以让你给dst或src生成特制遮罩,盖住眼镜、手掌等脸部遮挡物

整体使用流程如下
一、挑选dst和SRC典型图若干
二、绘制dst和src的遮罩
三、训练遮罩模型,让模型学会根据图片来生成遮罩。这样你不用每张图都画遮罩
四、将训练好的遮罩模型应用到所有图片中,使得每张图都根据模型生成遮罩图
五、合成时,选择合适遮罩模式


那么接下来就分开讲讲每个怎么做
一、挑选dst和SRC典型图若干
1. 挑DST和SRC中典型代表画面若干,放置到2个文件夹中,比如说AAAA/DST和AAAA/SRC。相似内容的图片不需要重复选。通常有个30-50张足够。    默认可以不放另外文件夹,直接放aligned文件夹就行,这样以下步骤中的改脚本中路径的操作可以全部跳过
2. 偷懒可以不选SRC,只选DST。

二、绘制dst的遮罩
1. 用记事本打开  5.XSeg) dst头像遮罩编辑.bat    (英文为5.XSeg) data_dst mask - edit.bat)
2. 将--input-dir "%WORKSPACE%\data_dst\aligned" 改成--input-dir "AAAA/DST",保存
3. 运行该脚本
4. 进入绘制界面,然工具提示勾勒好每个图的脸部区域

二、绘制src的遮罩(可以不画,只用dst的就行)
1. 用记事本打开  5.XSeg) src头像遮罩编辑.bat    (英文为5.XSeg) data_src mask - edit.bat)
2. 将--input-dir "%WORKSPACE%\data_dst\aligned" 改成--input-dir "AAAA/DST",保存
3. 双击运行该脚本
4. 进入绘制界面,然工具提示勾勒好每个图的脸部区域


三、训练遮罩模型
1. 用记事本打开  5.X1XSeg) 训练遮罩模型.bat (英文为5.XSeg) train.bat)

2. 修改里面的 --training-data-dst-dir "%WORKSPACE%\data_dst\aligned"  改为你刚才存放dst遮罩图的路径
3. 修改里面的 --training-data-src-dir "%WORKSPACE%\data_src\aligned"  改为你刚才存放srct遮罩图的路径,如果没有,填dst遮罩图的路径即可
4. 保存脚本
5. 双击运行脚本
6. 等待训练完成。等模型训练得到的遮罩基本正确时,就可以停止训练了。    你也可以用别人已经训练过的Xseg模型基础上,继续训练,把模型放到model文件夹下即可


四、合成时,选择合适遮罩模式
1. 在常规合成阶段,按X可以切换遮罩模式,选择一个效果好的模式使用即可

提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群519316315
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复

使用道具 举报

3

主题

404

帖子

2476

积分

初级丹圣

Rank: 8Rank: 8

积分
2476
发表于 2020-12-21 08:36:11 | 显示全部楼层
支持坛主,非常详细的教程
回复 支持 1 反对 0

使用道具 举报

11

主题

561

帖子

3626

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3626
发表于 2020-12-21 09:14:02 | 显示全部楼层
请分析下和作者的流程有啥区别,优势和劣势
回复 支持 反对

使用道具 举报

7

主题

35

帖子

666

积分

高级丹师

Rank: 5Rank: 5

积分
666

开心娱乐节日勋章

发表于 2020-12-21 09:25:06 | 显示全部楼层
thanks very much!
回复 支持 反对

使用道具 举报

75

主题

1493

帖子

7839

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7839

万事如意节日勋章

发表于 2020-12-21 10:57:35 | 显示全部楼层
遮罩包含额头部分吧?可以解决额头面具横线问题吗
回复 支持 反对

使用道具 举报

3

主题

136

帖子

1136

积分

初级丹圣

Rank: 8Rank: 8

积分
1136
发表于 2020-12-21 10:59:44 | 显示全部楼层
谢谢分享
回复

使用道具 举报

204

主题

1959

帖子

57万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
576810

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

 楼主| 发表于 2020-12-21 18:22:20 | 显示全部楼层
solobabbit 发表于 2020-12-21 09:14
请分析下和作者的流程有啥区别,优势和劣势

没啥区别呀
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群519316315
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 反对

使用道具 举报

10

主题

2862

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
17254

万事如意节日勋章

发表于 2020-12-21 20:18:25 | 显示全部楼层
几时X 能像FAN那样整合自动训练好了
回复 支持 反对

使用道具 举报

14

主题

381

帖子

2026

积分

初级丹圣

Rank: 8Rank: 8

积分
2026
发表于 2020-12-22 15:53:39 | 显示全部楼层
看起来还挺麻烦的
回复 支持 反对

使用道具 举报

0

主题

44

帖子

372

积分

初级丹师

Rank: 3Rank: 3

积分
372
发表于 2020-12-22 20:58:37 | 显示全部楼层
谢谢分享
回复

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-18 13:51 , Processed in 0.089915 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表