deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 756|回复: 8

切的DST脸部外框不对,但眼嘴对齐了的,这样的还保留吗?

[复制链接]

25

主题

62

帖子

701

积分

高级丹师

Rank: 5Rank: 5

积分
701
 楼主| 发表于 2024-1-27 09:30:04 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评

练再好的丹,没有切对DST,都是白费啊。
如题,类似这种的,查看特征图,脸外框明显比正常脸小一大圈,但眼睛和嘴又切对了的DST图,还需要保留吗?

一般切好DST,会发现有特别多这样的图,都需要挑出来重新切吗?问题是重新切还是这样的啊。

如图,脸小了一大圈

如图,脸小了一大圈
回复

使用道具 举报

15

主题

1865

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23386

万事如意节日勋章

发表于 2024-1-27 10:24:52 | 显示全部楼层
本帖最后由 come3002 于 2024-1-27 13:23 编辑

如果是练好的丹。要看效果。
如下图 三个镜头。有的好像DST切脸时候把枕头当人脸一部分了。
先用该练好丹。零训练直接合成。
口和眼睛,牙齿,嘴唇纹理细节都比较像src,属于比较满意就保留。当然如果不满意就删除这个镜头。

360截图20240127101943534.jpg


有的把头发当人脸。
360截图20240127131702311.jpg
有的DST直接一塌糊涂。也 要合成一次看效果
360截图20240127124600558.jpg

回复 支持 反对

使用道具 举报

1

主题

10

帖子

109

积分

高级丹童

Rank: 2

积分
109
发表于 2024-1-27 12:19:13 | 显示全部楼层
come3002 发表于 2024-1-27 10:24
要看效果。
如下图。好像DST切脸时候把枕头当人脸一部分了。
零训练直接合成。如果口和眼睛,牙齿,嘴唇纹 ...

我也是这样,切脸后眼睛嘴巴鼻子啥的都对不准,比如眼睛对到眉毛上了,侧脸鼻子在脸外边去了,脸的边缘是一堆乱线。但是整体头像在正中间图片看着还好,问下这样的头像使用这样会不会影响训练?
回复 支持 反对

使用道具 举报

12

主题

849

帖子

9603

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
9603
发表于 2024-1-27 13:24:16 | 显示全部楼层
暴躁的圣光 发表于 2024-1-27 12:19
我也是这样,切脸后眼睛嘴巴鼻子啥的都对不准,比如眼睛对到眉毛上了,侧脸鼻子在脸外边去了,脸的边缘是 ...

我觉得可以用。
因为特征点数据主要是用来对齐和切脸的,训练的时候,并不会把特征点数据输入进神经网络。唯一有点影响的是开口眼优化,因为口眼优化会用特征点生成口眼遮罩加入计算。
回复 支持 反对

使用道具 举报

1

主题

115

帖子

677

积分

高级丹师

Rank: 5Rank: 5

积分
677

万事如意节日勋章

发表于 2024-1-27 15:29:52 | 显示全部楼层
暴躁的圣光 发表于 2024-1-27 12:19
我也是这样,切脸后眼睛嘴巴鼻子啥的都对不准,比如眼睛对到眉毛上了,侧脸鼻子在脸外边去了,脸的边缘是 ...

会影响,不建议使用,建议重切。
回复 支持 反对

使用道具 举报

25

主题

62

帖子

701

积分

高级丹师

Rank: 5Rank: 5

积分
701
 楼主| 发表于 2024-1-27 15:47:05 | 显示全部楼层
come3002 发表于 2024-1-27 10:24
如果是练好的丹。要看效果。
如下图 三个镜头。有的好像DST切脸时候把枕头当人脸一部分了。
先用该练好丹。 ...

丹练的真不错,你用的哪家的遮罩?我看牙齿都练出来了
回复 支持 反对

使用道具 举报

15

主题

1865

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23386

万事如意节日勋章

发表于 2024-1-27 17:29:36 | 显示全部楼层
本帖最后由 come3002 于 2024-1-27 22:49 编辑
afeyxx 发表于 2024-1-27 15:47
丹练的真不错,你用的哪家的遮罩?我看牙齿都练出来了

1.遮罩是论坛下载的。 我忘了链接。参数是这个。

Model Summary =================
==                                            ==
==        Model name: XSeg                    ==
==                                            ==
== Current iteration: 14091750                ==
==                                            ==
==-------------- Model Options ---------------==
==                                            ==
==         face_type: wf                      ==
==        batch_size: 16                      ==
==          pretrain: False                   ==
==                                            ==
==---------------- Running On ----------------==
==                                            ==
==      Device index: 0                       ==
==              Name: NVIDIA GeForce GTX 1070 ==
==              VRAM: 7.23GB                  ==

2.牙齿和嘴唇纹理效果,主要是 SRC提供的。要练出下牙齿 就要 训练用的主体包SRC能看到 下牙齿,又能看到嘴唇纹理。
假如你的素材还算可以。
主体SRC训练到一定阶段。发现下牙齿,嘴唇纹理没有出。就采取分步训练。
如想强化下牙齿,就搜集你 的 全SRC 中 所有 下牙齿的 ,建成 ”下牙齿包“ 比如800张。800张再分3组。
第一组最清晰的,比较大的下牙齿 比如100张。主打少而精,先用这100张做SRC。
第二组 是 比较清晰的,但下牙齿露出 一半。比如500 主打的是数量多。有了之前的100张做基础,训练会很快。
第三组是微微露出下牙齿的。比如200张。有了之前600张做基础,很容易收尾。
图1 下牙齿很大。属于第一组。


1.jpg
图2 下牙齿非常小。属于收尾。
4.jpg


练练就找 1080p/4k DST 零训练检测。到你满意为止。
如果素材足够,嘴唇纹理包,闭眼包,睫毛包等,都同理,也是这种方法,依次类推。
等丹练好了,找樱花DST 切脸后,零训练直接合成即可。
(1080p 樱花,bed一般要求不高,
能看到 略微的下牙齿也就停了。
1080p怼脸(人头像接近占满屏幕高度)/4k 樱花中景(人头像占屏幕高度一半) 建议练出 下牙齿和嘴唇纹理。
如下图 下牙齿 嘴唇纹理基本完成 。(下一步可以搜集 睫毛包,等)

360截图20240127222658274.jpg





回复 支持 反对

使用道具 举报

2

主题

63

帖子

489

积分

初级丹师

Rank: 3Rank: 3

积分
489

万事如意节日勋章

发表于 2024-1-28 12:47:08 | 显示全部楼层
教程的信息量这么大,等周一做个笔记。
回复 支持 反对

使用道具 举报

20

主题

498

帖子

4万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
46720

真我风采勋章灵石富豪勋章

发表于 2024-1-29 10:09:11 | 显示全部楼层
因为我用的是3D的嘴眼特征点,2D的脸颊特征点,岛国视频躺着就是会这样。

要是用3D的脸颊特征点也不会贴着脸颊边描点,而是根据对称的脸型来预测。

能旋转的先指定旋转一下,有强迫症的就手动吧,脸颊对合成的影响不大,毕竟有遮罩模型。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-18 16:54 , Processed in 0.116303 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表