deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 862|回复: 8

其它的mask 导入方式------- 成功了

[复制链接]

11

主题

162

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
 楼主| 发表于 2023-3-8 17:08:16 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 by100 于 2023-3-15 21:44 编辑

现在的遮罩都是从Xseg模型得到的, 并且可以导出mask图;


那么可以反过来吗?用其他工具在外面画遮罩,再将mask遮罩图合到face图里。

有支持的软件吗?



======================== 成功 ====================
我已经成功从外部的mask图写入视频帧人脸了, 我们可以用其它软件制作更加精细化的遮罩了。

示例:
视频帧00001.png + 遮罩图像00001.png --(两张图像大小一样, 遮罩区域就是视频人脸原始区域)  ===> 人脸图 00001_0.jpg

正在整理代码, 之后放出。
----------------------------------------
获取的原始遮罩大小与人脸图大小相同,为了与当前xseg模型匹配,
遮罩暂时缩放至256*256后写入人脸, 后续查看训练代码,看看遮罩如何使用, 希望遮罩大小对训练无影响,这样就可以不用缩放,使用原始遮罩了。







回复

使用道具 举报

215

主题

1996

帖子

66万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
667196

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

发表于 2023-3-8 22:47:51 | 显示全部楼层
可以,但要自己写python脚本
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 反对

使用道具 举报

11

主题

162

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
 楼主| 发表于 2023-3-9 11:43:26 | 显示全部楼层
滚石 发表于 2023-3-8 22:47
可以,但要自己写python脚本

就是不想写才问的
只能自己写了
回复 支持 反对

使用道具 举报

20

主题

499

帖子

5万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
51942

真我风采勋章

发表于 2023-3-9 15:29:00 | 显示全部楼层
可以一起折腾折腾,主要是要关联dfl的信息
回复 支持 反对

使用道具 举报

11

主题

162

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
 楼主| 发表于 2023-3-9 17:21:16 | 显示全部楼层
fanda 发表于 2023-3-9 15:29
可以一起折腾折腾,主要是要关联dfl的信息

我预想的方式是在外部用钢笔工具等一些软件去画精细的mask, mask边缘会比画点更加平滑,更精细和方便。


现在已经再看源代码了,计划给视频帧添加mask,提取人脸。
回复 支持 反对

使用道具 举报

4

主题

23

帖子

160

积分

高级丹童

Rank: 2

积分
160
发表于 2023-3-9 18:16:43 | 显示全部楼层
by100 发表于 2023-3-9 17:21
我预想的方式是在外部用钢笔工具等一些软件去画精细的mask, mask边缘会比画点更加平滑,更精细和方便。

...

带我一起折腾,我曾经想过用Nuke(影视级合成软件)做更精细的抠像和roto,之后输出遮罩给DFL用。
因为Nuke是可以程序化抠像的,如果抠不下来也可以用很多影视合成的流程更便捷、快速的roto,效率和质量都更高。
只是我对编程不太熟练,一个人可能折腾不出来,如果你要折腾的话,可以一起吗?有意的话可以私信我。
个人经验。不一定准确,仅供参考!望多多指教!
回复 支持 反对

使用道具 举报

11

主题

162

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
 楼主| 发表于 2023-3-15 21:45:31 | 显示全部楼层
玫瑰少年™ 发表于 2023-3-9 18:16
带我一起折腾,我曾经想过用Nuke(影视级合成软件)做更精细的抠像和roto,之后输出遮罩给DFL用。
因为Nu ...

搞定,
其它的mask 导入方式------- 成功了
https://dfldata.xyz/forum.php?mod=viewthread&tid=13212
(出处: deepfacelab中文网)
回复 支持 反对

使用道具 举报

4

主题

23

帖子

160

积分

高级丹童

Rank: 2

积分
160
发表于 2023-3-16 18:08:45 | 显示全部楼层
by100 发表于 2023-3-15 21:45
搞定,
其它的mask 导入方式------- 成功了
https://dfldata.xyz/forum.php?mod=viewthread&tid=13212

坐等代码
个人经验。不一定准确,仅供参考!望多多指教!
回复 支持 反对

使用道具 举报

6

主题

248

帖子

1479

积分

初级丹圣

Rank: 8Rank: 8

积分
1479

万事如意节日勋章

发表于 2023-10-31 15:57:47 | 显示全部楼层
怎么实现的呢
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-23 10:27 , Processed in 0.088533 second(s), 9 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表