deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 710|回复: 10

【萌新求助】用于生成直播的dfm是不是只要训练src遮罩就行

[复制链接]

10

主题

62

帖子

454

积分

初级丹师

Rank: 3Rank: 3

积分
454
 楼主| 发表于 2024-6-24 14:52:11 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 猪悟能 于 2024-6-24 14:54 编辑

【萌新求助】用于生成直播的dfm是不是只要提取src人脸------- 编辑src遮罩----------训练src遮罩---------训练SAEHD模型  然后导出SAEHD直播模型就可以,

dst就不要放东西? model里面不同大佬给的东西 是不是选择后生成也会不一样?
回复

使用道具 举报

14

主题

2939

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15931

真我风采勋章万事如意节日勋章

发表于 2024-7-31 18:24:19 | 显示全部楼层
tgyoyo 发表于 2024-7-31 02:02
请问有大佬方便给个传送门或关键字吗? 谢谢

数据集?FFHQ,RTT,celebA。论坛都有。
个人推荐FFHQ,数量少点,品质高点。
回复 支持 1 反对 0

使用道具 举报

14

主题

2939

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15931

真我风采勋章万事如意节日勋章

发表于 2024-6-24 15:13:49 | 显示全部楼层
本帖最后由 wtxx8888 于 2024-6-24 15:17 编辑

DST不放东西?不放东西你怎么训练模型?
DST要放数据集(N多人的脸图),才能训炼模型,不然你练空气???
正常训练模型,就是SRC单人,对DST多人,然后才能转直播模型。
回复 支持 反对

使用道具 举报

10

主题

62

帖子

454

积分

初级丹师

Rank: 3Rank: 3

积分
454
 楼主| 发表于 2024-6-24 15:17:51 | 显示全部楼层
wtxx8888 发表于 2024-6-24 15:13
DST不放东西?不放东西你怎么训练模型?练空气???

scr里面的脸是想直播用的脸,那dst里要放什么东西?随意吗?还是可以和scr一样的?
回复 支持 反对

使用道具 举报

14

主题

2939

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15931

真我风采勋章万事如意节日勋章

发表于 2024-6-24 15:18:30 | 显示全部楼层
本帖最后由 wtxx8888 于 2024-6-24 15:21 编辑
猪悟能 发表于 2024-6-24 15:17
scr里面的脸是想直播用的脸,那dst里要放什么东西?随意吗?还是可以和scr一样的? ...

DST要放数据集(N多人的脸图),可以下载知名的数据集。(论坛自己找)
或者自己弄N个人的脸,合一起当DST也行。
回复 支持 反对

使用道具 举报

10

主题

62

帖子

454

积分

初级丹师

Rank: 3Rank: 3

积分
454
 楼主| 发表于 2024-6-24 15:25:24 | 显示全部楼层
wtxx8888 发表于 2024-6-24 15:18
DST要放数据集(N多人的脸图),可以下载知名的数据集。(论坛自己找)
或者自己弄N个人的脸,合一起当DST ...

谢谢大佬 那这样练要不要把在训练里面预训练模型选择从别的大佬那下载的预训练模型,不是很理解选不同大佬的模型训练出来有什么不同,
回复 支持 反对

使用道具 举报

32

主题

191

帖子

3610

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3610

万事如意节日勋章

QQ
发表于 2024-6-24 15:55:45 | 显示全部楼层
猪悟能 发表于 2024-6-24 15:25
谢谢大佬 那这样练要不要把在训练里面预训练模型选择从别的大佬那下载的预训练模型,不是很理解选不同大 ...

这个问题我来回答你小猪师弟。
想办法直接弄一个比较好的遮罩(比如论坛里面的镇坛遮罩)
1.不管你预训练还是什么途径弄到的dst切好脸的素材(预训练、 小日本动作片、你或女友摆拍。。。。。。。。)建议放进dst前都运行dst.....apply命令写入遮罩一次。
2.src也是同理运行src....apply命令写入遮罩一次就好。
先炼出一个你自己满意的丹 ,效果好后导出dfm,在直播中测试找不足。然后再考虑训练遮罩的问题。
回复 支持 反对

使用道具 举报

10

主题

62

帖子

454

积分

初级丹师

Rank: 3Rank: 3

积分
454
 楼主| 发表于 2024-6-24 16:46:19 | 显示全部楼层
bbking2018 发表于 2024-6-24 15:55
这个问题我来回答你小猪师弟。
想办法直接弄一个比较好的遮罩(比如论坛里面的镇坛遮罩)
1.不管你预训练 ...

谢谢大佬,刚摸软件好多不太明白。。。
大佬的意思是在提取人脸之前先写入DST遮罩吗  那这样还要编辑遮罩的吗还是写入了就可以直接训练了?

第二个问题:   再弱弱问一句直播用的单  SCR数据集是不是只能用同一个妆容的去训练 还是只要是同个人的脸 什么素材都可以丢进去
回复 支持 反对

使用道具 举报

32

主题

191

帖子

3610

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3610

万事如意节日勋章

QQ
发表于 2024-6-24 18:12:25 | 显示全部楼层
猪悟能 发表于 2024-6-24 16:46
谢谢大佬,刚摸软件好多不太明白。。。
大佬的意思是在提取人脸之前先写入DST遮罩吗  那这样还要编辑遮罩 ...

妆容不是问题,只要后期你开真脸和脸部风格都能调整的。用你想要的妆容src 精选出来清晰,妆容特点一致的丢dst里面对炼就好了
回复 支持 反对

使用道具 举报

3

主题

39

帖子

355

积分

初级丹师

Rank: 3Rank: 3

积分
355
发表于 2024-7-31 02:02:23 | 显示全部楼层
wtxx8888 发表于 2024-6-24 15:18
DST要放数据集(N多人的脸图),可以下载知名的数据集。(论坛自己找)
或者自己弄N个人的脸,合一起当DST ...

请问有大佬方便给个传送门或关键字吗? 谢谢
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-22 04:53 , Processed in 0.135146 second(s), 35 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表