deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1480|回复: 15

牙齿

[复制链接]

6

主题

100

帖子

1963

积分

初级丹圣

Rank: 8Rank: 8

积分
1963
 楼主| 发表于 2023-6-15 08:10:17 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 深海鳕鱼 于 2023-9-4 22:22 编辑

训练不够,牙齿模糊,但不影响发现问题。

侵蚀W 10-15 再大SRC牙齿就没了  羽化E 80-100左右。

正常笑容(图1)只露上面牙齿是SRC完整的牙齿。

一旦SRC张嘴或者张嘴笑(图2),就会出现DST跟SRC的牙齿,变成两排牙齿,或者SRC的牙齿隐约只有一点甚至不见。


(图3)牙齿隐约,模糊,基本被DST替代。

(SRC写入了遮罩) 我想移除遮罩,重新训练一次看看是不是写入遮罩导致的问题。


1.png
2.png
3.png
回复

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26121

万事如意节日勋章

发表于 2023-6-15 08:35:55 | 显示全部楼层
本帖最后由 come3002 于 2023-6-15 09:07 编辑

底丹参数?
SRC 切脸默认 的WF512 90%?
SRC 带牙齿图片有没有?

====================
DFL实质是图片转换软件。
SRC没有下牙齿,训练是不会产生下牙齿的。或者要有好的作品就要有好的DST和SRC同时带牙齿图片(任何一方模糊都可能出问题)。
可能1:没有切到清晰的牙齿图片
建议:找更好的资源。
如果视频视频清晰是1080p特写(人脸占屏幕高度2/3以上)就要切WF1024、768,质量选择100%,不要切默认的WF512. 90%
可能2:图片模糊,进而引起模糊的图片让软件得到错误的信息。产生了2排上牙齿。
(图3)牙齿隐约,模糊,基本被DST替代。
从图3看出,DST需要检查一次。找到该帧的DST 检查 DST 人脸图片 牙齿是否跟SRC 大小一致,清晰度一致。
假如是SRC清晰,而DST不清晰。(在樱花国作品经常会有1080p 但动作过快,出现模糊图片,从而导致牙齿为止识别失败)
建议:用坛主的人脸清晰化神器处理一下DST该帧人脸。让软件找到牙齿准确信息。重新合成一次。
假如还没有改善。先用人脸清晰化神器优化整张图,在重新切一下该帧的DST 人脸。切法:1080p特写(人脸占屏幕高度2/3以上)就要切WF1024、768,质量选择100%,不要切默认的WF512. 90%


加快训练牙齿效率策略

其他部分训练差不多了。要训练牙齿了
第一步:先找视频怼脸拍的特写 SRC和DST上牙齿图片,单独训练上牙齿。(DST一定要查一次。只训练清晰带牙齿图片做底子)
第二步:放入模糊DST牙齿
再把稍微模糊的DST 带模糊牙齿的 跟清晰DST牙齿一起。这样有清晰的做底子。会快很多。
第三步:之后所有 SRC、所有DST正常训练一段实际,融合数据。

有可能就再找下牙齿。(不一定找得到)
如下图古力。我5w张 古力WF1024.大概 下牙齿只有不到1%

C8_012903_0.jpg

C8_021640_0.jpg

360截图20230615083440769.jpg

360截图20230615083456178.jpg














回复 支持 反对

使用道具 举报

6

主题

100

帖子

1963

积分

初级丹圣

Rank: 8Rank: 8

积分
1963
 楼主| 发表于 2023-6-15 08:46:35 | 显示全部楼层
本帖最后由 深海鳕鱼 于 2023-6-30 12:10 编辑
come3002 发表于 2023-6-15 08:35
底丹参数?
SRC 切脸默认 的WF512 90%?
SRC 带牙齿图片有没有?

1                  
回复 支持 反对

使用道具 举报

6

主题

100

帖子

1963

积分

初级丹圣

Rank: 8Rank: 8

积分
1963
 楼主| 发表于 2023-6-15 10:30:46 | 显示全部楼层
本帖最后由 深海鳕鱼 于 2023-9-4 22:23 编辑

终于解决问题了,牙齿不再出现两排或是隐约模糊了。


受到了彩叔的启发,自己做了调整。

自行移除了SRC写入的遮罩,参数不变重新训练,合成牙齿还是两排或是隐约不清。

换了另外一个遮罩,我之前用镇坛的(不是说镇坛不好,但对于牙齿这里有点瑕疵),不知道现在更新的镇坛会不会更好。

换了另外一个遮罩合成出来,不再出现两排牙齿和牙齿模糊不清的情况了(此遮罩论坛里另外一位大佬的)



回复 支持 反对

使用道具 举报

13

主题

993

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11924
发表于 2023-6-15 15:45:47 | 显示全部楼层
其实就是镇坛之宝的遮罩类型问题。镇坛之宝会把牙齿内的口腔抠掉,如果你dst没有吐舌头和吃香蕉,那你你换个不抠掉的遮罩就行。

还有,除非是src的图片有遮挡物,一般也不用写入遮罩。
回复 支持 反对

使用道具 举报

1

主题

11

帖子

516

积分

高级丹师

Rank: 5Rank: 5

积分
516
发表于 2023-6-15 17:40:40 | 显示全部楼层
女鬼既视感
回复 支持 反对

使用道具 举报

6

主题

100

帖子

1963

积分

初级丹圣

Rank: 8Rank: 8

积分
1963
 楼主| 发表于 2023-6-15 20:14:52 | 显示全部楼层
seancai110 发表于 2023-6-15 15:45
其实就是镇坛之宝的遮罩类型问题。镇坛之宝会把牙齿内的口腔抠掉,如果你dst没有吐舌头和吃香蕉,那你你换 ...

不关写不写入的问题,我写入跟不写入都一样,我用2个抖音视频露齿笑的测试过。
就是合成是遮罩选的问题,XSEG系列基本对这类普通视频牙齿不友好,选learned系列的话,牙齿没问题,但脸部有遮挡例如有手等等的话,会直接被SRC脸覆盖。
回复 支持 反对

使用道具 举报

13

主题

993

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11924
发表于 2023-6-15 21:10:37 | 显示全部楼层
本帖最后由 seancai110 于 2023-6-15 21:11 编辑
深海鳕鱼 发表于 2023-6-15 20:14
不关写不写入的问题,我写入跟不写入都一样,我用2个抖音视频露齿笑的测试过。
就是合成是遮罩选的问题, ...

你可以换一个,不扣口腔的遮罩 应该也是有的,就是有些遮罩扣香蕉,但是不扣口腔里面。我手上就有一个,之前在论坛里免费下的。但是那个人被封了,我也不好发出来。
回复 支持 反对

使用道具 举报

11

主题

148

帖子

2254

积分

初级丹圣

Rank: 8Rank: 8

积分
2254
发表于 2023-6-15 21:17:12 | 显示全部楼层
seancai110 发表于 2023-6-15 21:10
你可以换一个,不扣口腔的遮罩 应该也是有的,就是有些遮罩扣香蕉,但是不扣口腔里面。我手上就有一个, ...

学习学习
回复 支持 反对

使用道具 举报

6

主题

100

帖子

1963

积分

初级丹圣

Rank: 8Rank: 8

积分
1963
 楼主| 发表于 2023-6-15 21:19:58 | 显示全部楼层
本帖最后由 深海鳕鱼 于 2023-6-15 21:21 编辑
seancai110 发表于 2023-6-15 21:10
你可以换一个,不扣口腔的遮罩 应该也是有的,就是有些遮罩扣香蕉,但是不扣口腔里面。我手上就有一个, ...

我知道你说的是哪个,我也有存
滚石应该不可能不考虑普通视频换脸牙齿的问题吧,或许我的训练不足,导致src跟dst牙齿融合度不够,或许吧。
改天再测试下两款遮罩对于口腔内液体的视频

论坛里关于脸上浆糊的遮罩,都是答辩,没镇坛好。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-23 17:22 , Processed in 0.110672 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表