deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: wtxx8888

SRC补角度详解与实操

  [复制链接]

14

主题

2951

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
16003

真我风采勋章万事如意节日勋章

 楼主| 发表于 2023-12-19 03:15:16 | 显示全部楼层
本帖最后由 wtxx8888 于 2023-12-19 03:18 编辑
WaveBedo 发表于 2023-12-19 01:56
我看到一些说法,
用来练专丹的src,最好不要出现在预训练里对练,
否则,练专丹的时候,虽然可以很快清 ...

专丹。。。。目前的教程练法,并不是最优的。
当然了,要想最优法练专丹,预训练的丹跟素材,是有硬性要求的。
不了解的预训练丹训练专丹,确实要按照教程那样练。
回复 支持 反对

使用道具 举报

41

主题

741

帖子

5307

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5307

万事如意节日勋章开心娱乐节日勋章

发表于 2023-12-19 18:35:00 | 显示全部楼层
wtxx8888 发表于 2023-12-19 03:15
专丹。。。。目前的教程练法,并不是最优的。
当然了,要想最优法练专丹,预训练的丹跟素材,是有硬性 ...

你还有更好的练法啊,羡慕啊!

我觉得炼丹太费时间,太费精力了,
我都是希望快快摆脱它们而已,
已经没有什么激情了
回复 支持 反对

使用道具 举报

4

主题

110

帖子

948

积分

高级丹师

Rank: 5Rank: 5

积分
948
发表于 2023-12-24 17:10:01 | 显示全部楼层
本帖最后由 xylego 于 2023-12-24 17:12 编辑

感谢大佬分享,仔细看了几遍这几天也开始试验,有几个小问题请指教。

1.
第二步。根据SRC的角度图,MVE里,把外圈 5度 的角度,全部提取出来。左SRC,右金鱼素材DST。

这一步的意思是不是src和dst都只提取外圈的5度的角度进行训练?还是说只有src提取外圈 5度 的角度,dst还是用金鱼全套(5000张图)?

另外,提取的时候应该从最内圈(最小角度)5度开始好呢,还是从最外圈(最大角度)开始好?

2.
第五步。保存DST数据(提取的金鱼脸部),将数据文件复制到新直方图目录,用金鱼数据直接恢复直方图。

这里有个疑惑,就是由于新生成提取的dst脸部直方图有可能有不满意的删除了,导致脸部文件数目跟原来对不上。不知道放到data_src/aligned中恢复数据会发生什么。
例如:我第一轮src中有100张图,我感觉练的差不多了就输出dst直方图了。在检查输出结果的时候发现有些角度还是不太行(模糊或者扭曲或者五官认不出来),就删掉了一些(剩下95张)。那么这时候的脸部数据恢复法还有用吗?

因为不太确定,我目前还是老老实实的一遍遍重新切脸。。然后debug。。

3.
第六步。将恢复的直方图放入SRC后,使用之前的SRC-SRC备份,覆盖模型以全新开局。

请问为什么要用一开始备份的SRC模型从头开始?为什么不用第一轮循环已经迭代过更多次(训练过更多角度)的模型接着练?
回复 支持 反对

使用道具 举报

14

主题

2951

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
16003

真我风采勋章万事如意节日勋章

 楼主| 发表于 2023-12-24 18:21:40 | 显示全部楼层
本帖最后由 wtxx8888 于 2023-12-24 18:24 编辑
xylego 发表于 2023-12-24 17:10
感谢大佬分享,仔细看了几遍这几天也开始试验,有几个小问题请指教。

1.

这是几年前的东西了,现在但凡有电脑基础的,都是AI绘图Stable-diffusion补了。
去学AI绘图吧比这个快多了,效果也强的多。
训练目标的LORA,然后对金鱼素材的面部,进行局部重绘
回复 支持 反对

使用道具 举报

4

主题

110

帖子

948

积分

高级丹师

Rank: 5Rank: 5

积分
948
发表于 2023-12-24 18:24:56 | 显示全部楼层
wtxx8888 发表于 2023-12-24 18:21
这是几年前的东西了,现在但凡有电脑基础的,都是AI绘图Stable-diffusion补了。
去学AI绘图吧比这个快多 ...

好的,我去看看Stable-diffusion
回复 支持 反对

使用道具 举报

4

主题

110

帖子

948

积分

高级丹师

Rank: 5Rank: 5

积分
948
发表于 2023-12-28 20:39:34 | 显示全部楼层
wtxx8888 发表于 2023-12-24 18:21
这是几年前的东西了,现在但凡有电脑基础的,都是AI绘图Stable-diffusion补了。
去学AI绘图吧比这个快多 ...

这是几年前的东西了,现在但凡有电脑基础的,都是AI绘图Stable-diffusion补了。
去学AI绘图吧比这个快多了,效果也强的多。
训练目标的LORA,然后对金鱼素材的面部,进行局部重绘
大佬你好,听了你的建议我这几天学了点SD的基础知识,感觉挺有趣的。
我已经用src训练了一个目标Lora,然后使用controlnet,配合金鱼素材抓面部角度和轮廓,进行图生图。目前脸部效果还行,但是脸以外的区域乱七八糟的什么都有。。。
我也想尝试用局部重绘,问题是金鱼的角度有5000多张。。每张都要画蒙版有点太难了。。
虽然有批量处理的选项,但是我没有批量的蒙版素材。
回复 支持 反对

使用道具 举报

1

主题

124

帖子

1093

积分

初级丹圣

Rank: 8Rank: 8

积分
1093

万事如意节日勋章

发表于 2024-1-31 01:06:19 | 显示全部楼层
我发现在一些大角度的眼神上会有失真的问题,而且一开始没学对之后也不会纠正,我自己是眼嘴优先开的比较早的,不然就会眼神不对或者呆板问题,不知道是不是普遍现象
回复 支持 反对

使用道具 举报

0

主题

42

帖子

998

积分

高级丹师

Rank: 5Rank: 5

积分
998
发表于 2024-3-26 18:32:32 | 显示全部楼层
第五步。保存DST数据(提取的金鱼脸部),将数据文件复制到新直方图目录,用金鱼数据直接恢复直方图。
不会保存恢复操作的参见此贴


合成后的直方图,用原来的金鱼脸部数据恢复,会出现脸部定位点不准的情况吧?
回复 支持 反对

使用道具 举报

14

主题

2951

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
16003

真我风采勋章万事如意节日勋章

 楼主| 发表于 2024-3-26 19:03:30 | 显示全部楼层
本帖最后由 wtxx8888 于 2024-3-26 19:06 编辑
ego8898 发表于 2024-3-26 18:32
第五步。保存DST数据(提取的金鱼脸部),将数据文件复制到新直方图目录,用金鱼数据直接恢复直方图。
不会 ...

DFL第一次用?DFL允许15%的误差。
没看过DFL的特征点?有哪张是百分百准的?都是差点
侧脸的眉毛点位,超多都出脸的范围了!不是一样用的挺好?
回复 支持 反对

使用道具 举报

0

主题

42

帖子

998

积分

高级丹师

Rank: 5Rank: 5

积分
998
发表于 2024-3-27 02:39:18 | 显示全部楼层
wtxx8888 发表于 2024-3-26 19:03
DFL第一次用?DFL允许15%的误差。
没看过DFL的特征点?有哪张是百分百准的?都是差点
侧脸的眉毛 ...

搞清楚了定位点不准是分辨率的问题。DST是512的,模型是224的。这合成直方图的时候设置超分多少?才能出512的直方图?
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-27 10:14 , Processed in 0.148248 second(s), 31 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表