deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
123
返回列表 发新帖
楼主: caominghao

分享一个训练SRC三小时出细节的方法

[复制链接]

0

主题

198

帖子

4124

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4124
发表于 2024-1-16 00:10:11 | 显示全部楼层
caominghao 发表于 2024-1-15 20:29
老哥太博学了,我还以为这方法没人用呢,没想到论坛早就有大佬提出了 ...

不知道其他人,这个方法我19年刚接触dfl的时候就玩过了,不过没用到gan
回复 支持 反对

使用道具 举报

7

主题

119

帖子

8207

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8207
发表于 2024-1-16 02:33:48 | 显示全部楼层
这样玩不如直接用Rope,简单直接粗暴,效果还过得去。用dfl的目的就是高还原度。
回复 支持 反对

使用道具 举报

15

主题

1932

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23572

万事如意节日勋章

发表于 2024-1-16 10:14:52 | 显示全部楼层
zpg 发表于 2024-1-16 00:10
不知道其他人,这个方法我19年刚接触dfl的时候就玩过了,不过没用到gan

224分辨率下,gan用好了非常厉害,坛主的那个迪丽热巴训练了1个月。
你可以看看坛主的 224 迪丽热巴 liae 224 RW版和 GAN版。合成出来后区别天壤之别。
300W-RW开 文件夹是dfl模型,脸型五官更像迪丽热巴,但毛孔细节不够
470W-带GAN 文件夹是dfl模型,毛孔细节清晰

360截图20240116101317406.jpg




回复 支持 反对

使用道具 举报

36

主题

666

帖子

4362

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4362

万事如意节日勋章开心娱乐节日勋章

发表于 2024-2-4 18:37:50 | 显示全部楼层
come3002 发表于 2024-1-15 10:20
感谢分享经验。
花了点时间测试了下 楼主的速成 “嘴唇纹理”等细节的练法。
素材选取:

同一个预训练丹,练出来的专丹A、专丹B。能否借用gan?
就是能否通过复制gan文件的做法,把gan的效果借过来
回复 支持 反对

使用道具 举报

15

主题

1932

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23572

万事如意节日勋章

发表于 2024-2-4 23:15:18 | 显示全部楼层
本帖最后由 come3002 于 2024-2-4 23:26 编辑
WaveBedo 发表于 2024-2-4 18:37
同一个预训练丹,练出来的专丹A、专丹B。能否借用gan?
就是能否通过复制gan文件的做法,把gan的效果借过 ...

兄弟,如果你把你的素材炼制到跟 有上传者的关gan前一样清晰,然后再开gan。会gan的特别快。
如果你的素材一般(比不上上传者),炼制的效果很一般(关gan前 时 预览第五列比不上 上传者),开gan后也是很一般。

这是遇强则强遇弱则弱的一种类似滚雪球效应。

故同一个预训练丹。复用问题, gan是锦上添花。但核心的关键是素材运用。

假设如果你的SRC素材 比 人家的 专丹A 所用的还要好。可能练出的细节比A丹还要好。

实验测试目的: 素材较好,无gan 能否炼制出 较好的 睫毛 下牙齿 嘴唇纹理 细节。


实例1:睫毛炼制(无gan)
很多坛友睫毛炼制贴子。我尝试多次失败多次,最近摸索一点头绪。发现 关键是 素材。
由于我手头 搞到的睫毛 素材极少。 src和dst 角度相差有点大。故开了随机扭曲
这个是以左边图为SRC,然后直接训练。右图是训练一段时间合成效果。


360截图20240204223502078.jpg



结果:无gan,但是该角度已经出现了 SRC 对应的嘴唇颜色,睫毛等 SRC的特征。
放大看,右图 右眼大约能看清4-6根长睫毛 。
(非古力丹,也只成功这一个角度。古力 睫毛正在搜集中)


实例2 下牙齿炼制  (无gan)。
很多坛友 下牙齿炼制贴子。我尝试多次发现有了一点头绪,发现 关键还是  素材。
零训练直接合成。
能看到即便是侧脸45°,也能看到清晰的微小下牙齿。
(古力丹,多角度下牙齿基本完成)
360截图20240123185333317.jpg

实例3:嘴唇纹理 炼制(无gan)


第一张图 右图是 专丹A 嘴唇纹理不明显。
360截图20240203195743650.jpg
第二张图 右图是 专丹A基础上练的B (无gan)
利用的是优质 素材
零训练直接合成。
结果 出的嘴唇纹理大约能看到8-9道,细节 优于专丹A
(古力丹 嘴唇纹理基本完成)
360截图20240203195728304.jpg

结论:无gan ,一样可以练出 多角度的下牙齿,8-9道嘴唇纹理细节;无gan (开扭曲) 也可以练出 睫毛细节。
故 足够的合适的优质素材是关键。

而且要利用好手头最好素材,下牙齿比较优势数量多角度好,就先练下牙齿(实例2),素材嘴唇纹理比较好就再练嘴唇纹理(实例3);
睫毛素材较少就暂时放一放。搜集够足够素材再炼制。
当然如果有的素材睫毛比较好就先出睫毛(实例1)。



评分

参与人数 1贡献 +1 收起 理由
WaveBedo + 1 十分给力!

查看全部评分

回复 支持 反对

使用道具 举报

36

主题

666

帖子

4362

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4362

万事如意节日勋章开心娱乐节日勋章

发表于 2024-2-5 12:24:02 | 显示全部楼层
本帖最后由 WaveBedo 于 2024-2-5 12:25 编辑
come3002 发表于 2024-2-4 23:15
兄弟,如果你把你的素材炼制到跟 有上传者的关gan前一样清晰,然后再开gan。会gan的特别快。
如果你的素材 ...

好的。更加说明了dfl是个图片替换软件,
清晰度只要还是靠src、dst,
而且应该尽量保留src的细节
回复 支持 反对

使用道具 举报

36

主题

666

帖子

4362

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4362

万事如意节日勋章开心娱乐节日勋章

发表于 2024-2-5 12:56:25 | 显示全部楼层
come3002 发表于 2024-2-4 23:15
兄弟,如果你把你的素材炼制到跟 有上传者的关gan前一样清晰,然后再开gan。会gan的特别快。
如果你的素材 ...

你的第一张图,角度差距有点大啊
src,最接近右图角度的,就是左图这一张吗?
如果是的话,那说明DFL补角度的范围还是挺大的
回复 支持 反对

使用道具 举报

15

主题

1932

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23572

万事如意节日勋章

发表于 2024-2-5 14:08:24 | 显示全部楼层
WaveBedo 发表于 2024-2-5 12:56
你的第一张图,角度差距有点大啊
src,最接近右图角度的,就是左图这一张吗?
如果是的话,那说明DFL补角 ...

SRC还有 跟dst有 角度再近一些的。我是为了练睫毛做的预实验,纯属随手开了扭曲,只关注 睫毛细节。
(写入了4-6跟长睫毛的 睫毛细节。嘴唇纹理也写入了(src和dst的嘴唇纹理是完全不同的);不过可能角度差别较大,好像脸型还是 受到dst影响的。
回复 支持 反对

使用道具 举报

36

主题

666

帖子

4362

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4362

万事如意节日勋章开心娱乐节日勋章

发表于 2024-2-5 15:20:48 | 显示全部楼层
come3002 发表于 2024-2-5 14:08
SRC还有 跟dst有 角度再近一些的。我是为了练睫毛做的预实验,纯属随手开了扭曲,只关注 睫毛细节。
(写 ...

好的
回复 支持 反对

使用道具 举报

12

主题

71

帖子

1952

积分

初级丹圣

Rank: 8Rank: 8

积分
1952
发表于 2024-2-11 23:49:58 | 显示全部楼层
caominghao 发表于 2024-1-15 23:50
得再攒20天才能买得起坛主的丹,我4g1050ti的破炉也不一定带的起来。事实上我现在觉得这种方法也太繁琐了 ...

4g显存bs能开多少啊 我11g2080ti 只能开4
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-6-18 04:25 , Processed in 0.099096 second(s), 13 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表