deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 8468|回复: 69

WF416模型全件套大姐版-带src遮罩dst-再加4万FFHQ女性WF1024头像

  [复制链接]

26

主题

334

帖子

2万

积分

高级丹圣

风擎

Rank: 13Rank: 13Rank: 13Rank: 13

积分
24659
 楼主| 发表于 2023-5-2 13:00:22 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:5  参与人数:1  我的评分:未评
本帖最后由 windjet 于 2023-6-25 11:00 编辑

这个是前面发布的两个预训练模型全件套3姐妹版的大姐版,同样是一整套训练资源集合,就是刚接触DeepFaceLab什么资源都没有的朋友,通过这个全件套马上就能训练出一个优质专模或万能丹出来,这个大姐版是WF416模型,是全件套三姐妹里面最高的,二妹版是WF384模型,三妹版是WF320模型,如果想要WF256模型,在原来二妹版的悬赏的SAFC属性选择器里面可以白嫖一个CelebA练成的WF256预训练模型。

WF416模型全件套大姐版

WF416模型全件套大姐版


除了dst一样,其它各方面都超过其两个妹妹了,首先是预训练集是从大名鼎鼎的FFHQ里面选取的高分辨率纯女性真正全集合版,已经切脸为WF1024,数量为近3万8千张(37830张),据我所知,这在数量和分辨率两方面已经远超论坛已有的仅仅8千张(7910张)WF768的FFHQ女性集合了。由于是高清高分辨率1024头像所以体积较大,因此另外也提供体积较小的WF512头像集的下载,你可以根据自己的需要选择相应的头像集。
模型提高分辨率到WF416模型,src也相应地提升分辨率为1024(韩国偶像林娜琏),遮罩提升为V3版。

具体来说,模型是WF416纯女性非官方预训练模型,df-udt 结构,140万迭代,这个是论坛里面常见的非官方预训练模型,即不再需要打开预训练参数,直接就能用,但需注意的是,这个模型是女性专丹,它的140万预训练迭代全部都是年轻女性,除了FFHQ年轻女性外基本上都是NSFW(主要都是欧美的,NSFW的意思自己上百度查)年轻女性的内容,所以不适合男性丹使用,对于年轻女性会显像很快,但对于男性及年老女性会显像慢。
下面是把附带的src资源放"\data_src\aligned"下,预训练资源faceset.pak放"\data_dst\aligned"下的女性专模的训练效果,都使用默认参数,没有长时间跑仅作测试参考用,也就是说这个模型还没有完全定型,你可以在这个基础上训练任何其它女性专模。

WF416模型训练预览图

WF416模型训练预览图


因为是高分辨模型,所以已经把这个模型预设为为默认最低参数,如果你不改任何参数也不能运行起来,那么也就不用再折腾了,等换了更高级别的显卡再说吧(6G的GTS1060可能是最低配置),但至少附带的FFHQ等其它资源也不会让你付出的灵石吃亏的,如果跑起来了,那么祝贺你然后再按照下面的教程逐步提高各种参数试一试。
https://dfldata.cc/forum.php?mod=viewthread&tid=642&extra=page%3D1
【老鸟进阶】训练参数详解

FFHQ纯女性完全集合的角度分布图如下所示,由于数量的关系,比CelebA的女性WF512版的角度要略微差一点。
MVE的1.5倍角度:

MVE的1.5倍角度

MVE的1.5倍角度


MVE的1.0倍角度:

MVE的1.0倍角度

MVE的1.0倍角度


FFHQ数据集是显卡巨头英伟达发布的,虽然清晰度不容置疑,也放几张WF1024切脸后的样本吧:

WF1024切脸后样本01

WF1024切脸后样本01

WF1024切脸后样本02

WF1024切脸后样本02

WF1024切脸后样本03

WF1024切脸后样本03


训练集切脸样本图:

训练集切脸样本图

训练集切脸样本图


src为韩国偶像林娜琏WF1024共5千张(4978张),女子演唱组合TWICE成员,主要为外网搬运的资源,高分辨率且清晰度不错,但比较单一及角度也不太好,所以本人自己切脸补充了一部分WF024头像在里面。
遮罩为以前发布的一个282万WF512预训练模型里的遮罩的升级版,据作者说这个版本已经是第3版的最终版且以后不再升级这个遮罩的第3版,绝大部分脸部遮挡及液体,舌头,头发等NSFW内容都可以对应。
dst资源和其它两姊妹一样,为横屏及竖屏各种分辨率(从4k到1k)及各种时间长短的8个资源,可以当合成测试用。

至此,有名的女性预训练数据集资源从WF256到WF512以及WF1024都全了,模型的话如果加上SAFC属性选择器里的模型,也有了WF256,WF320,WF384,WF416这一系列,虽然部分是搬运,但全部都是测试过的比较好的模型,希望能帮助到各位朋友。

FFHQ女性训练集下载后解压就是pak文件包(faceset.pak),可以直接使用,不用再解压为图片了,除非你想加自己的资源。
使用方法:
1,官方标准预训练模型的训练(pretrain: True),把"\_internal\pretrain_faces"下面的原始faceset.pak备份,然后用这个faceset.pak包替换它。
2,非官方标准预训练模型的训练(pretrain: False),把faceset.pak包放"\data_src\aligned"和"\data_dst\aligned"下各一份,直接用不要再解压成图片了。
3,专人模型的训练,把faceset.pak包放"\data_dst\aligned"下,直接用不要再解压成图片了。
4,想看头像图片,把faceset.pak包放"\data_dst\aligned"下,执行5.2) data_dst util faceset unpack.bat来解压图片。

评分

参与人数 1贡献 +1 收起 理由
lxmmc8 + 1 太好了感谢楼主

查看全部评分

风擎,就是风之引擎。
回复

使用道具 举报

15

主题

1835

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23191

万事如意节日勋章

发表于 2023-5-11 15:05:39 | 显示全部楼层
本帖最后由 come3002 于 2023-5-11 15:13 编辑
15998388151 发表于 2023-5-4 22:57
楼主,对于1080P的视频256与416合成出来的效果差的大吗?训练时间能差多少? ...

我支持楼主的观点。仅仅是1080p 中景而言差别不大(因为大多数场景要看上半身嘛)。
我最近考虑到底什么是适合我用的,最合适的,最好的的专丹。于是最近下载了包括楼主大佬精心炼制的 张芷溪 256 丹在内的论坛192-448 分辨率 30多个专丹做测试。其中也用我自己做到256专丹比较。
第一项测试 访谈  30多个丹都做

DST: 1080p 切WF768,中景。
零训练直接合成。开W、E和T(参数设置都相同)

全部上传没意义。仅上传几张以为抛砖引玉
坛友转的国外同一人做的320 df udt (352 88 88 28)448 df ud(512 88 88 28)与 对比
(论坛有压缩)
Toyer 448 320 对比2.jpg


我的256(自闭2.0 320 88 66 22) 与 坛友分享的448df ud(512 88 88 28)对比。
(论坛有压缩)
Toyer 448 对比。.jpg


除了访谈,另外还在做其他樱花国 1080p 、床上、浴室等不同场景的中景实战测试。但是画面不能上传。。。。
仅从我手头得到这几十个专丹(当然论坛大佬还有好的专丹)。几轮下来结果看,可大概看出结论。
结论:仅仅是DST 为樱花国 主流的 1080p 中的  中景而言,256 320 448 差别不大
回复 支持 1 反对 0

使用道具 举报

0

主题

14

帖子

334

积分

初级丹师

Rank: 3Rank: 3

积分
334
发表于 2023-5-7 06:01:43 | 显示全部楼层
FFHQ纯女性完全集合的角度分布图如下所示,由于数量的关系,比CelebA的女性WF512版的角度要略微差一点。

所以大佬...CelebA的女性WF512版 在哪里...
回复 支持 0 反对 1

使用道具 举报

3

主题

434

帖子

2462

积分

初级丹圣

Rank: 8Rank: 8

积分
2462
发表于 2023-5-2 14:11:31 | 显示全部楼层
本帖最后由 ken2099 于 2023-5-2 14:15 编辑

楼主真的是下功夫了,好好赞一下
虽然我不太用的上,但是也要支持你一下

另外啰嗦一句,对于416的模型,最佳匹配的分辨率就是416,使用超过416的分辨率的素材都没有意义,因为训练时程序会自动将图片缩放成416再进行使用。
这是为什么大部分素材都只切到512就够了,再高的分辨率徒增CPU负担。
回复 支持 1 反对 0

使用道具 举报

15

主题

1835

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23191

万事如意节日勋章

发表于 2023-5-2 14:24:04 | 显示全部楼层
感谢楼主分享。已经购买
回复 支持 反对

使用道具 举报

26

主题

334

帖子

2万

积分

高级丹圣

风擎

Rank: 13Rank: 13Rank: 13Rank: 13

积分
24659
 楼主| 发表于 2023-5-2 15:25:23 | 显示全部楼层
ken2099 发表于 2023-5-2 14:11
楼主真的是下功夫了,好好赞一下
虽然我不太用的上,但是也要支持你一下

谢谢提醒,但这次切的WF1024不仅仅是为了对应416模型的,也是为了能对应其它更高分辨率的模型,而且网盘里面有FFHQ女性全集WF1024和WF512两个版本,大家可以根据自己的需要自行选择下载。
风擎,就是风之引擎。
回复 支持 反对

使用道具 举报

5

主题

90

帖子

1680

积分

初级丹圣

Rank: 8Rank: 8

积分
1680
发表于 2023-5-2 19:15:41 | 显示全部楼层
支持一下,辛苦了
回复 支持 反对

使用道具 举报

0

主题

11

帖子

147

积分

高级丹童

Rank: 2

积分
147
发表于 2023-5-3 14:14:32 | 显示全部楼层
楼主牛逼!!!估计零食刚好够
回复 支持 反对

使用道具 举报

9

主题

271

帖子

1555

积分

初级丹圣

Rank: 8Rank: 8

积分
1555

万事如意节日勋章

发表于 2023-5-3 17:44:53 | 显示全部楼层
你这更新的真快,前几个都买了,还没练呢,你这又更新啦
回复 支持 反对

使用道具 举报

26

主题

334

帖子

2万

积分

高级丹圣

风擎

Rank: 13Rank: 13Rank: 13Rank: 13

积分
24659
 楼主| 发表于 2023-5-3 20:00:57 | 显示全部楼层
bg2kcg 发表于 2023-5-3 17:44
你这更新的真快,前几个都买了,还没练呢,你这又更新啦

这是最后的一个有名的女性集合了,至此常用分辨率的女性训练集合就全了,从WF1024到WF256都有了,模型也从WF416到WF256都有了,你可以根据自己的显卡挑一个合适自己的,不是正好吗。
风擎,就是风之引擎。
回复 支持 反对

使用道具 举报

9

主题

271

帖子

1555

积分

初级丹圣

Rank: 8Rank: 8

积分
1555

万事如意节日勋章

发表于 2023-5-3 20:26:42 | 显示全部楼层
windjet 发表于 2023-5-3 20:00
这是最后的一个有名的女性集合了,至此常用分辨率的女性训练集合就全了,从WF1024到WF256都有了,模型也 ...

谢谢,我的是titan x 12G,你推荐哪个?
回复 支持 反对

使用道具 举报

26

主题

334

帖子

2万

积分

高级丹圣

风擎

Rank: 13Rank: 13Rank: 13Rank: 13

积分
24659
 楼主| 发表于 2023-5-3 22:21:57 | 显示全部楼层
bg2kcg 发表于 2023-5-3 20:26
谢谢,我的是titan x 12G,你推荐哪个?

12G的话估计WF416也能跑,但我还是推荐分辨率WF256模型,因为高分辨率模型其实没必要,可以在后期合成的时候按T来超分提高分辨率,就是用于4K视频实用效果也行,除非你是公司广告用4K以上的视频,低模型可以在相同的时间内跑更多的迭代,效率更高,但女性模型还是需要HHFQ女性集和CelebA女性集都训练的,因为它们的内容完全不同。
风擎,就是风之引擎。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-12 00:21 , Processed in 0.098180 second(s), 13 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表