deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 834|回复: 9

关于dst写入遮罩的用处疑问

[复制链接]

8

主题

66

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2024-3-15 14:50:46 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
有个疑问,将遮罩写入dst人脸后,这部分遮罩数据主要使用在哪个步骤?训练遮罩模型使用?训练人脸模型使用?合成人脸阶段使用?
求解惑

回复

使用道具 举报

40

主题

862

帖子

4690

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4690

万事如意节日勋章

发表于 2024-3-15 15:11:58 | 显示全部楼层
本帖最后由 pasanonic 于 2024-3-15 15:14 编辑

dst不需要写入遮罩,写入也没有什么影响,写入遮罩是为了修改,保留舌头、牙齿之类想要留下的东西到合成脸
但src是必需写入的,可以把额头的头发或其他遮挡物屏蔽掉,模型会比较干净,如果src额头和眉毛之间有异物,脸部有长发会被学习进模型,造成额头、脸部发黑
回复 支持 1 反对 0

使用道具 举报

8

主题

66

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2024-3-15 16:29:16 | 显示全部楼层
pasanonic 发表于 2024-3-15 15:11
dst不需要写入遮罩,写入也没有什么影响,写入遮罩是为了修改,保留舌头、牙齿之类想要留下的东西到合成脸
...

谢谢解答
特地试了下,我把dst人脸的嘴巴圈出来,发现合成的时候没有效果,依然是用的整个人脸替换的,切换全部遮罩模式也无效果,是哪里不对吗?
回复 支持 反对

使用道具 举报

40

主题

862

帖子

4690

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4690

万事如意节日勋章

发表于 2024-3-15 16:46:35 | 显示全部楼层
本帖最后由 pasanonic 于 2024-3-15 16:48 编辑
amani153 发表于 2024-3-15 16:29
谢谢解答
特地试了下,我把dst人脸的嘴巴圈出来,发现合成的时候没有效果,依然是用的整个人脸替换的,切 ...

你这个工程量有点大,会不像src,脸型不符合,嘴巴可能是歪的,不建议,你可以找个嘴巴的遮罩模型
因为每一个关键帧的嘴巴你都要画,画完后遮罩模型还要训练学习一会才会实现,这个过程很快
回复 支持 反对

使用道具 举报

8

主题

66

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2024-3-15 16:48:17 | 显示全部楼层
pasanonic 发表于 2024-3-15 16:46
你这个工程量有点大,会不像src,脸型不符合,嘴巴可能是歪的,不建议
因为每一个关键帧的嘴巴你都要画,画完后 ...

原来如此,那就不折腾了
回复 支持 反对

使用道具 举报

23

主题

77

帖子

1293

积分

初级丹圣

Rank: 8Rank: 8

积分
1293
发表于 2024-4-11 23:46:01 | 显示全部楼层
pasanonic 发表于 2024-3-15 16:46
你这个工程量有点大,会不像src,脸型不符合,嘴巴可能是歪的,不建议,你可以找个嘴巴的遮罩模型
因为每一个关 ...

嘴巴的遮罩模型哪里有》????
回复 支持 反对

使用道具 举报

40

主题

862

帖子

4690

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4690

万事如意节日勋章

发表于 2024-4-12 15:10:55 | 显示全部楼层
qq313586234 发表于 2024-4-11 23:46
嘴巴的遮罩模型哪里有》????

模型区有相应的专用嘴巴、舌头、液体的
回复 支持 反对

使用道具 举报

7

主题

88

帖子

1039

积分

初级丹圣

Rank: 8Rank: 8

积分
1039
发表于 2024-6-25 17:39:33 | 显示全部楼层
pasanonic 发表于 2024-4-12 15:10
模型区有相应的专用嘴巴、舌头、液体的

你好,假如我有一个512切好的头像,经过一些清晰化或者别的什么操作没有了脸部遮罩信息,我说的这个遮罩不是指遮挡遮罩信息,而是切脸的时候提取的脸部信息,即相当于debug里面的人脸标识信息。
这种情况下我需要重新提取人脸吗?
或者说有这个头像的话永远无需提取人脸?
要是需要重新提取人脸的话,会不会影响图片尺寸和质量?
能在不提取人脸的情况下有什么方法直接写入脸部信息吗?
回复 支持 反对

使用道具 举报

40

主题

862

帖子

4690

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4690

万事如意节日勋章

发表于 2024-6-25 18:35:35 | 显示全部楼层
wuzhicom107 发表于 2024-6-25 17:39
你好,假如我有一个512切好的头像,经过一些清晰化或者别的什么操作没有了脸部遮罩信息,我说的这个遮罩 ...

https://dfldata.cc/forum.php?mod ... =%E8%84%B8%E5%9B%BE
不知道行不行,你说的跟这个类似
回复 支持 反对

使用道具 举报

7

主题

88

帖子

1039

积分

初级丹圣

Rank: 8Rank: 8

积分
1039
发表于 2024-6-25 18:51:32 | 显示全部楼层
pasanonic 发表于 2024-6-25 18:35
https://dfldata.cc/forum.php?mod=viewthread&tid=9822&highlight=%E8%84%B8%E5%9B%BE
不知道行不行,你 ...

好的,多谢
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-23 01:09 , Processed in 0.141180 second(s), 34 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表