deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: jinyuan37

【直播炼丹】纯女性320WF脸ICE木兰丹

[复制链接]

15

主题

1942

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
24303

万事如意节日勋章

发表于 2023-11-9 14:56:18 | 显示全部楼层
WaveBedo 发表于 2023-11-9 14:33
我是在训练个人专用模型(使用别人的预训练模型作为底丹,df-ud模型,使用普通的dfl,不是木兰),
不是单 ...

有几个图片类似的位置都有类似的情况,就是头发比较薄的位置。
=====================
我之前早期炼丹也发现过。
1. 可能某些图片太模糊,尤其皮肤和头发分不清。练练容易出现大片晶体。
2. 或可能图片清晰,但是 头发稀疏,头发和皮肤间隙小,遮罩也遮盖不全。 会出现少量晶体
如下图。
360截图20231104222642774.jpg

Screenshot_20231105_190121_com.xunlei.downloadprovider_edit_884253863200488.jpg


回复 支持 反对

使用道具 举报

36

主题

674

帖子

4465

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4465

万事如意节日勋章开心娱乐节日勋章

发表于 2023-11-9 15:03:42 | 显示全部楼层
come3002 发表于 2023-11-9 14:56
有几个图片类似的位置都有类似的情况,就是头发比较薄的位置。
=====================
我之前早期炼丹也 ...

我觉得就相当于图片脆弱的位置,不适合多次扭曲变形,变形过量了,就坏了。
回复 支持 反对

使用道具 举报

46

主题

779

帖子

8404

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8404

开心娱乐节日勋章

 楼主| 发表于 2023-11-9 15:16:10 | 显示全部楼层
WaveBedo 发表于 2023-11-9 14:33
我是在训练个人专用模型(使用别人的预训练模型作为底丹,df-ud模型,使用普通的dfl,不是木兰),
不是单 ...

遮罩提前写入素材了吗?
回复 支持 反对

使用道具 举报

36

主题

674

帖子

4465

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4465

万事如意节日勋章开心娱乐节日勋章

发表于 2023-11-9 15:18:07 | 显示全部楼层
jinyuan37 发表于 2023-11-9 15:16
遮罩提前写入素材了吗?

提前写入了。dst、src都写入了
回复 支持 反对

使用道具 举报

15

主题

1942

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
24303

万事如意节日勋章

发表于 2023-11-9 15:19:02 | 显示全部楼层
WaveBedo 发表于 2023-11-9 15:03
我觉得就相当于图片脆弱的位置,不适合多次扭曲变形,变形过量了,就坏了。 ...

我的做法是遇到这类问题,首先考虑是不是素材本身 存在的污染问题。
比如先把可能诱发该问题的素材找到暂时移除(头发稀疏但 仰角或闭眼等有特点素材)。重新练练看,如果后来改进了。那么剩下的这批应该是质量过关的精选素材。就形成了主体包。
再把主体包迭代 一定数量,练出了一定细节。
之后将头发稀疏但 仰角或闭眼等有特点素材)的拿回来,练练。
这样既保障主体优质,也能增加更多 仰角 或闭眼等特点,另外 污染也相对较小。

评分

参与人数 1贡献 +1 收起 理由
WaveBedo + 1 十分给力!

查看全部评分

回复 支持 反对

使用道具 举报

36

主题

674

帖子

4465

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4465

万事如意节日勋章开心娱乐节日勋章

发表于 2023-11-9 15:27:32 | 显示全部楼层
come3002 发表于 2023-11-9 15:19
我的做法是遇到这类问题,首先考虑是不是素材本身 存在的污染问题。
比如先把可能诱发该问题的素材找到暂 ...

应该是src、dst的角度缺少,造成结果不同步,有的成像好,有的成像差,结果有的已经过量了,有的还没达到效果。另外,就是有刘海的材料,还是尽量不用,不过,这很难做到。所以,还是只能靠src尽量角度足够,质量接近
回复 支持 反对

使用道具 举报

36

主题

674

帖子

4465

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4465

万事如意节日勋章开心娱乐节日勋章

发表于 2023-11-9 15:43:45 | 显示全部楼层

我看到下面这位坛友的说法,感觉有点道理
如果会考虑用dst素材补角度的话应该先不用管遮罩了,得关遮罩训练效果才好,带遮罩很难补
你们有这样操作过吗?具体是怎么操作呢?


什么时候开masked_training呢?
dst、src从头到尾都不用写入遮罩吗?
(我之前都是dst、src提前写入遮罩的,但我觉得他说的有道理,所以,想知道如何操作)



QQ截图20231109153201.png

QQ截图20231109153223.png
回复 支持 反对

使用道具 举报

46

主题

779

帖子

8404

积分

高级丹圣

【少女之友】

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8404

开心娱乐节日勋章

 楼主| 发表于 2023-11-9 20:25:17 | 显示全部楼层
WaveBedo 发表于 2023-11-9 15:43
我看到下面这位坛友的说法,感觉有点道理
“如果会考虑用dst素材补角度的话应该先不用管遮罩了,得关遮罩 ...

SRC肯定要写入的,不然你会把刘海等东西也训练进去:
1.练专丹开启遮罩训练,会自动用系统默认的由特征点围成的F脸垃圾遮罩作为遮罩,肯定比不过自己的遮罩。
2.练专丹不开启遮罩训练,占用系统大量资源训练多余的地方,只能是作为补充训练用。
3.预训练,预训练不存在补角度的说法,都是自己自己训练自己。角度都是一样的不用补。
DST的话:
1.练专丹过程中的DST杂图不用写入遮罩,这些杂图只是用来陪练的不需要写入遮罩。在一些特殊情况下,如果SRC和DST同时都有遮罩,有可能会出现黑色区域。
2.换视频时的DST,合成时直接运用遮罩就可以。追求好的效果得手动画。
3.你说的DST素材补角度,是指用SRC导出DST对应角度的直方图,然后把到处的直方图当作SRC吧。这种我没试过不清楚,关遮罩训练都是辅助。可以在训练足够的情况下再间隔开一段时间让边缘清晰些。
回复 支持 反对

使用道具 举报

36

主题

674

帖子

4465

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4465

万事如意节日勋章开心娱乐节日勋章

发表于 2023-11-9 23:43:53 | 显示全部楼层
本帖最后由 WaveBedo 于 2023-11-9 23:45 编辑
jinyuan37 发表于 2023-11-9 20:25
SRC肯定要写入的,不然你会把刘海等东西也训练进去:
1.练专丹开启遮罩训练,会自动用系统默认的由特征点 ...

之所以问这个问题是因为看到预览图,写了遮罩的脸都是不完整的脸,
不完整的脸用来补角度,应该会有难度的,所以我觉得他说的有点道理。
不过,不写遮罩的话,有刘海遮挡,也相当于不完整的脸。
想不明白他说的意思。算了,不用管了
回复 支持 反对

使用道具 举报

5

主题

67

帖子

3861

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3861
QQ
发表于 2023-11-21 22:25:35 | 显示全部楼层
帖子怎么收藏啊
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-7-3 16:02 , Processed in 0.084044 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表