deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1306|回复: 11

【提问】萌新看完所有教程后还有几个问题请教各位大佬

[复制链接]

6

主题

65

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2022-3-8 13:36:20 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 deviljoker5200 于 2022-3-8 13:53 编辑

精品教程从头到尾全部看了一遍,论坛大概逛了一遍,有几个问题没有搞明白。

---------------------------------------------------------------------------------------------------------------------
1. 素材src里的图片是各种杂图越多越好,还是从某个视频多方位角度截取出来的好。

杂图:角度多 光影多,但是可能一个角度就一种光影,然后又是其他的角度其他的光影。  而且每张图的清晰度不一样,发型不一样,遮挡不一样等等。

视频截取:光影可能比较单一,角度可能比较多,人物的面部统一。

这两种选哪种好。还是两种图都用来截取头像。

---------------------------------------------------------------------------------------------------------------------
2.模型的复用问题
看了教程的理解是,重新炼丹相当于教一个零基础的孩子画画,先学迪丽热巴转杨幂,会了之后(新模型练了一段时间),他以后刘亦菲转杨颖就会画的更快更好。是这个意思吗?

简单点说,开始用A转B,生成了一个模型,之后换src dst直接用这个模型再去 C转D,这样是可以的吗?

别人的丹相当于一个有基础的孩子,画画能力强,拿来就可以E转F吗?(NvN的意思)还是说丹都只是1v1或者1vN?
别人的丹可能一般,但是我可以继续训练他,修改他的可调参数,来练成一个更好的丹吗?

预训练模型和别人卖的模型是一个意思吗?可以简单比喻一下这两个模型吗?

大佬在这里说过一句话
https://dfldata.xyz/forum.php?mod=viewthread&tid=310&page=1#pid12
同一视频换不同人脸,用预训练模型做迁移训练,也很快,跑个十来分钟效果也差不多了” 这个是Nv1的情况吧
迁移训练是什么意思

---------------------------------------------------------------------------------------------------------------------
3.各种参数调整后实际影响效果有多大,炼丹速度降低了多少,因为每个人的硬件都不一样,所以不好统一说哪个参数设置到多少最好,所以很尴尬,想压榨硬件的同时又想获得好效果。

有没有调试参数的好建议,比如3090怎么样设置参数好点。如果一个一个参数去调整然后训练很久才看到效果,反馈太慢了。


---------------------------------------------------------------------------------------------------------------------
4.SHEAD和AMP哪个更好点,抛开live不谈,单纯说换脸来说。

---------------------------------------------------------------------------------------------------------------------
5.遮罩模型Xseg和普通模型是两个概念吗?有什么不同?


可以选择性的回答。先谢过各位大佬。


回复

使用道具 举报

6

主题

65

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2022-3-11 17:29:47 | 显示全部楼层
xuxiao794613 发表于 2022-3-8 13:55
实践出真知啊,很多问题你自己试过就知道怎么回事了,至少问题3需要自己去试;问题5自己再去看教程;问题1 ...

感谢回复,是要实操一下才行
回复 支持 0 反对 1

使用道具 举报

13

主题

194

帖子

1899

积分

初级丹圣

Rank: 8Rank: 8

积分
1899
发表于 2022-3-8 13:55:46 | 显示全部楼层
实践出真知啊,很多问题你自己试过就知道怎么回事了,至少问题3需要自己去试;问题5自己再去看教程;问题1的回答是,src当然是多多益善了;问题2我自己的理解是,总是以万能丹作为A,如果你想练一个B,可以用A练成B,但是如果你下次想练C,不要用B练而是用万能丹A开始练。
回复 支持 反对

使用道具 举报

13

主题

194

帖子

1899

积分

初级丹圣

Rank: 8Rank: 8

积分
1899
发表于 2022-3-8 13:58:01 | 显示全部楼层
xuxiao794613 发表于 2022-3-8 13:55
实践出真知啊,很多问题你自己试过就知道怎么回事了,至少问题3需要自己去试;问题5自己再去看教程;问题1 ...

总而言之,自己动手摸索一下!
回复 支持 反对

使用道具 举报

11

主题

162

帖子

886

积分

高级丹师

Rank: 5Rank: 5

积分
886
发表于 2022-3-8 16:20:27 | 显示全部楼层
本帖最后由 by100 于 2022-3-8 16:25 编辑

1,2 有人说过了,我就不多说了
3, 3090 用过一次但参数忘了, 后来换成A6000去练,主要参数df-ud wf  res320  dims320/72/72/24
A6000 显存48G  BS我最高开到40,3090的话BS16应该是没问题的4。 AMP没用过,等待其他人的解说
5. XSeg指的是人脸中需要做交换的区域遮罩。软件默认自带的遮罩适用范围较小,用的话最好还是用Xseg先画遮罩。论坛的万能遮罩和独孤遮罩不错,可以试试



回复 支持 反对

使用道具 举报

16

主题

483

帖子

8万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
83236

荣誉会员勋章小有贡献勋章

发表于 2022-3-9 02:40:41 | 显示全部楼层
       你需要弄明白一个问题就是,你是希望自己找素材从0开始练一个专人丹,还是一个泛用丹?
如果是专人丹,SRC只放同一个人的脸即可,但角度和光影尽可能的多,但考虑到从0开始练会比较慢,所以再开始练专人丹之前,最好放入各种不同的人脸去让模型学习,我们叫预训练。以此作为底丹再去做专门的单人训练。
泛用的丹,说白了也是底丹,没事的时候就放入各种SRC和DST让它训练,加强模型学习,当你需要针对性使用的时候再拿掉那些素材放入专门的素材进行使用。
预训练和别人卖的模型差不多是一个意思,就是别人已经帮你预先训练过了,你可以直接拿来复用。不管你是A转B还是C转D,对于一个已经有很好功底的模型来说,成像都会很快,这就取决于你的模型的预训练是否够好,我们之所以管一些丹叫神丹,就是因为它的预训练可能达到千万次,所以足够好,当你放入自己的素材时,它只需要几分钟就能够很好的成像了,我不建议任何新手和小白自己从0去做预训练,因为不懂素材的选择以及参数和步骤,多半练出来也是废丹,直接去下载大神们的神丹模型来跑自己的素材,先获得成就感。

还有某某某万能模型或者某某专人专模,这两个其实是一个东西,其原理就是在以及预训练好的底丹之上,放入专一的SRC和不同的DST再次训练得到的结果,这样的模型你甚至不需要训练,只需要放入想要替换的DST就可以直接用于合成。

各种参数对实际效果的影响还是有的,至于你说的每个人硬件不同,所以没有相对的值作为参考,而且不同的素材也是需要去调节不同的参数来让其最优化,这是DFL最难也是最有意思的地方,你想要得到最佳的效果,从新手进阶到高玩,就必须得吃透模型的参数,弄懂每个参数所带来的变化,然后遵循训练的三大步奏,成像-调整-强化细节 来搭配不同的参数去训练,举个例子,比如你的素材里有大量的正脸,如果你不开侧脸优化就会导致模型对侧脸的训练不足,所以很多时候是需要综合来看的,总之,想玩好DFL,模型参数的原理是必须要搞懂的,这是基础,网站的教程里也有详解。

就单纯换脸来说,SHEAD的模型更合适,其实这个不用说,你到模型区看一下百分之九十都是SHEAD。

遮罩模型和普通模型是两个不同的模型,但相互之间又有关联,一个是专门针对人脸进行训练的模型,一个是专门针对人脸遮罩进行训练的模型,你可以去看看我有关新手理解DFL的逻辑普及教程,就是在我签名里,没那么复杂。
回复 支持 反对

使用道具 举报

6

主题

65

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2022-3-11 17:31:28 | 显示全部楼层
by100 发表于 2022-3-8 16:20
1,2 有人说过了,我就不多说了
3, 3090 用过一次但参数忘了, 后来换成A6000去练,主要参数df-ud wf  res32 ...

感谢回复,尝试一下有啥不懂再提问
回复 支持 反对

使用道具 举报

6

主题

65

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2022-3-11 18:16:24 | 显示全部楼层
无敌小金鱼 发表于 2022-3-9 02:40
你需要弄明白一个问题就是,你是希望自己找素材从0开始练一个专人丹,还是一个泛用丹?
如果是专人 ...

感谢大佬耐心解答。你的帖子在综合交流区,初进论坛没看到。看了之后,还有些问题想问问。
1.遮罩模型和普通模型是单独训练的,对吧。那只需要把XSeg神丹和万能丹放在一起,自己准备src dst来训练就可以了吧。而且我是在神丹基础上继续迭代,那么这个丹会越来越强力,是这个道理吧。
2.像论坛的XSeg神丹和万能丹是否对于硬件不是特别好的用户友好些,对于硬件稍好的机器并不能100%发挥它的性能。因为有些参数是无法修改的。 丹的好坏只有用了才知道,不知道如何判断,不敢轻易购买。
回复 支持 反对

使用道具 举报

6

主题

65

帖子

578

积分

高级丹师

Rank: 5Rank: 5

积分
578
 楼主| 发表于 2022-3-11 18:34:38 | 显示全部楼层
无敌小金鱼 发表于 2022-3-9 02:40
你需要弄明白一个问题就是,你是希望自己找素材从0开始练一个专人丹,还是一个泛用丹?
如果是专人 ...

再请教一下。
liae结构的迪丽热巴万能模型 这个是坛主的专人丹,论坛里其他坛友卖的大部分也是专人丹。如果我用这些丹去改src,再训练可以吗?会不会出现四不像的情况。
猫之汉化免费神丹+Xseg万能遮罩205W,用不起镇坛之宝的可以拿这个来过渡一下
这个可以初期使用一下。
回复 支持 反对

使用道具 举报

16

主题

483

帖子

8万

积分

高级丹圣

论坛超级SVIP

Rank: 13Rank: 13Rank: 13Rank: 13

积分
83236

荣誉会员勋章小有贡献勋章

发表于 2022-3-11 20:08:12 | 显示全部楼层
deviljoker5200 发表于 2022-3-11 18:16
感谢大佬耐心解答。你的帖子在综合交流区,初进论坛没看到。看了之后,还有些问题想问问。
1.遮罩模型和 ...

1.遮罩模型和常规模型放在一起,它们会自己独立开,遮罩是需要单独训练的。你当然可以在神丹基础上继续迭代,但不一定会越来越好,因为你的素材如果太差反而会导致神丹越来越差,所以素材其实是炼丹过程中非常讲究的一步,就好比厨师所用的食材,一个好的厨师配上好的食材就能做出好的食物,同样一个好的厨师你给他些臭鱼烂虾他也无力回天。

2.每个丹的参数不一样,对配置的压力也是不一样的,这得看作者,你拿块4GB显存的显卡想去跑512分辨率的丹显然是不现实的,所以我才说你需要去弄清楚模型参数,然后结合自己的配置去选择合适参数的丹。不知道自己的配置能否跑别人的丹,有个很简单的办法就是自己新建一个和它一模一样参数的新丹,跑一下看看,不会bom就能用。

不管是万能模型还是专人丹,你都可以去改SRC再训练,一开始会不像,练一练就会变成你的SRC的样子了。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-27 15:48 , Processed in 0.136558 second(s), 34 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表