deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1762|回复: 10

DST想保留眼镜的话需要提前画遮罩么

[复制链接]

6

主题

110

帖子

1164

积分

初级丹圣

Rank: 8Rank: 8

积分
1164
 楼主| 发表于 2022-2-7 20:27:54 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
正常遮罩不是合成的时候用么,但是有时候效果不是不够好,那是需要提前画好遮罩再训练遮罩,然后进行训练;
还是最后训练完成后,再画遮罩并训练遮罩,合成的时候应用训练好的遮罩?
请教一下各位!

回复

使用道具 举报

16

主题

483

帖子

8万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
80955

荣誉会员勋章小有贡献勋章

发表于 2022-2-7 23:31:40 | 显示全部楼层
如果你有比较好的遮罩模型,里面有大量戴眼镜的遮罩,就可以试着跳过遮罩训练的部分直接合成的时候调用,但通常还是会有部分瑕疵,所以需要要先应用一下DST的遮罩,然后打开遮罩编辑查看是否有一些错误或者不完善的,这需要手动修复,然后再次训练。

简单说下步骤:
在没有遮罩模型时。
SRC需要画遮罩 训练遮罩 并应用遮罩。应用后要编辑遮罩 检查 修复 再训练再应用。
DST需要画遮罩 训练遮罩 并应用遮罩。应用后要编辑遮罩 检查 修复 再训练 然后移除之前DST应用的遮罩
DST这里不写入遮罩是因为如果SRC缺额头而DST露额头容易把头发学进去产生黑影,所以,合成时候用就行。
如果有万能遮罩,可以跳过一开画遮罩和训练的部分,直接应用,省掉前面两步,后面步骤和上面一样。

我感觉挺详细了,新手就按我这个步骤来就行。遮罩是个细活,很多新手容易懵逼,其实原理很简单,就是在你训练模型之前告诉模型哪些需要被学习进去哪些不需要被学进去,按这个逻辑去思考就不难了,出现各种错乱,黑影,等等其实就是模型把不该学的学进去了,所以,怎么画遮罩、什么时候画、多思考一下其实就明白了。
回复 支持 4 反对 0

使用道具 举报

2

主题

39

帖子

1502

积分

初级丹圣

Rank: 8Rank: 8

积分
1502
发表于 2022-2-12 09:01:33 | 显示全部楼层
无敌小金鱼 发表于 2022-2-9 23:40
这么比喻吧,训练遮罩相当于你的记忆,而写入遮罩相当于纹身。

前者把你的记忆清楚,后者把你的纹身洗掉 ...

越看越迷糊
回复 支持 1 反对 0

使用道具 举报

2

主题

39

帖子

1502

积分

初级丹圣

Rank: 8Rank: 8

积分
1502
发表于 2022-2-8 08:57:16 | 显示全部楼层
无敌小金鱼 发表于 2022-2-7 23:31
如果你有比较好的遮罩模型,里面有大量戴眼镜的遮罩,就可以试着跳过遮罩训练的部分直接合成的时候调用,但 ...

新手没看懂,先收藏一下    以后慢慢看  ,
回复 支持 反对

使用道具 举报

6

主题

110

帖子

1164

积分

初级丹圣

Rank: 8Rank: 8

积分
1164
 楼主| 发表于 2022-2-8 12:21:40 | 显示全部楼层
无敌小金鱼 发表于 2022-2-7 23:31
如果你有比较好的遮罩模型,里面有大量戴眼镜的遮罩,就可以试着跳过遮罩训练的部分直接合成的时候调用,但 ...

谢谢解惑 继续学习
回复 支持 反对

使用道具 举报

0

主题

338

帖子

2094

积分

初级丹圣

Rank: 8Rank: 8

积分
2094

万事如意节日勋章

发表于 2022-2-8 13:43:48 | 显示全部楼层
学习贴子中
回复 支持 反对

使用道具 举报

3

主题

188

帖子

1520

积分

初级丹圣

Rank: 8Rank: 8

积分
1520
发表于 2022-2-8 14:41:45 | 显示全部楼层
无敌小金鱼 发表于 2022-2-7 23:31
如果你有比较好的遮罩模型,里面有大量戴眼镜的遮罩,就可以试着跳过遮罩训练的部分直接合成的时候调用,但 ...

太棒了  亲爱的
回复 支持 反对

使用道具 举报

10

主题

484

帖子

5736

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5736
发表于 2022-2-9 22:44:06 | 显示全部楼层
无敌小金鱼 发表于 2022-2-7 23:31
如果你有比较好的遮罩模型,里面有大量戴眼镜的遮罩,就可以试着跳过遮罩训练的部分直接合成的时候调用,但 ...

不好意思,小弟還是沒看懂。。。例如已經有遮罩,合成時打部分都可以很貼合DST
但仍有少數幾張圖會有不適配的時候
例如下面這張圖的情況(這是壇友發過的一個問題,借圖來提問)
161051ufa6vfaht0wn9d36.jpg

圖片已經畫好排除後,接下來以下面編號,順序應該要怎麼做?
Snipaste_2022-02-09_22-34-15.png
另,還有4和5號都是遮罩移除,差別又是什麼?
遮罩提取又是什麼意思?
論壇已經搜尋過,滾石的文章也看過
但還是實在搞不清楚,麻煩您佬解惑,謝謝了
挺好的勒~來顆華子
回复 支持 反对

使用道具 举报

16

主题

483

帖子

8万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
80955

荣誉会员勋章小有贡献勋章

发表于 2022-2-9 22:53:53 | 显示全部楼层
ammo 发表于 2022-2-9 22:44
不好意思,小弟還是沒看懂。。。例如已經有遮罩,合成時打部分都可以很貼合DST
但仍有少數幾張圖會有不適 ...

少数不完美也属于正常,因为它不一定是DST引起的,有时候脸型不对或者脸部定位信息不准也会出现问题。

移除遮罩这个从字面上就能看出来了呀,5和10 就是移除你之前应用后的遮罩。

移除后打开遮罩编辑检查一下是否移除成功。
回复 支持 反对

使用道具 举报

10

主题

484

帖子

5736

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5736
发表于 2022-2-9 23:31:33 | 显示全部楼层
无敌小金鱼 发表于 2022-2-9 22:53
少数不完美也属于正常,因为它不一定是DST引起的,有时候脸型不对或者脸部定位信息不准也会出现问题。

...

訓練遮罩_移除遮罩_移除這兩者是什麼差別?
謝謝您~



挺好的勒~來顆華子
回复 支持 反对

使用道具 举报

16

主题

483

帖子

8万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
80955

荣誉会员勋章小有贡献勋章

发表于 2022-2-9 23:40:14 | 显示全部楼层
ammo 发表于 2022-2-9 23:31
訓練遮罩_移除跟遮罩_移除這兩者是什麼差別?
謝謝您~

这么比喻吧,训练遮罩相当于你的记忆,而写入遮罩相当于纹身。

前者把你的记忆清楚,后者把你的纹身洗掉。模型就是你的大脑,所以该移除哪一个应该清楚了吧。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-21 01:40 , Processed in 0.109033 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表